home *** CD-ROM | disk | FTP | other *** search
open in: 
MacOS 8.1
|
Win98
|
DOS
browse contents |
view JSON data
|
view as text
This file was processed as: Mailbox/MIME Entity
(archive/mbox).
| Confidence | Program | Detection | Match Type | Support
|
|---|
| 100%
| dexvert
| Mailbox/MIME Entity (archive/mbox)
| magic
| Supported |
| 100%
| dexvert
| Internet Message Format (text/imf)
| magic
| Supported |
| 1%
| dexvert
| Text File (text/txt)
| fallback
| Supported |
| 100%
| file
| Mailbox text, 1st line "From prechelt@ira.uka.de (Lutz Prechelt)", ASCII text, with CRLF line terminators
| default
| |
| 100%
| TrID
| E-Mail message (Var. 2)
| default
| |
| 100%
| checkBytes
| Printable ASCII
| default
| |
| 100%
| perlTextCheck
| Likely Text (Perl)
| default
| |
| 100%
| siegfried
| x-fmt/111 Plain Text File
| default
| |
| 100%
| detectItEasy
| Format: plain text[CRLF]
| default (weak)
| |
| 100%
| xdgMime
| application/mbox
| default
|
|
hex view+--------+-------------------------+-------------------------+--------+--------+
|00000000| 46 72 6f 6d 20 70 72 65 | 63 68 65 6c 74 40 69 72 |From pre|chelt@ir|
|00000010| 61 2e 75 6b 61 2e 64 65 | 20 28 4c 75 74 7a 20 50 |a.uka.de| (Lutz P|
|00000020| 72 65 63 68 65 6c 74 29 | 0d 0a 4e 65 77 73 67 72 |rechelt)|..Newsgr|
|00000030| 6f 75 70 73 3a 20 63 6f | 6d 70 2e 61 69 2e 6e 65 |oups: co|mp.ai.ne|
|00000040| 75 72 61 6c 2d 6e 65 74 | 73 2c 63 6f 6d 70 2e 61 |ural-net|s,comp.a|
|00000050| 6e 73 77 65 72 73 2c 6e | 65 77 73 2e 61 6e 73 77 |nswers,n|ews.answ|
|00000060| 65 72 73 0d 0a 53 75 62 | 6a 65 63 74 3a 20 46 41 |ers..Sub|ject: FA|
|00000070| 51 20 69 6e 20 63 6f 6d | 70 2e 61 69 2e 6e 65 75 |Q in com|p.ai.neu|
|00000080| 72 61 6c 2d 6e 65 74 73 | 20 2d 2d 20 6d 6f 6e 74 |ral-nets| -- mont|
|00000090| 68 6c 79 20 70 6f 73 74 | 69 6e 67 0d 0a 44 61 74 |hly post|ing..Dat|
|000000a0| 65 3a 20 31 20 4a 75 6e | 20 31 39 39 33 20 30 37 |e: 1 Jun| 1993 07|
|000000b0| 3a 33 35 3a 30 36 20 47 | 4d 54 0d 0a 0d 0a 41 72 |:35:06 G|MT....Ar|
|000000c0| 63 68 69 76 65 2d 6e 61 | 6d 65 3a 20 6e 65 75 72 |chive-na|me: neur|
|000000d0| 61 6c 2d 6e 65 74 2d 66 | 61 71 0d 0a 4c 61 73 74 |al-net-f|aq..Last|
|000000e0| 2d 6d 6f 64 69 66 69 65 | 64 3a 20 39 33 2f 30 35 |-modifie|d: 93/05|
|000000f0| 2f 32 30 0d 0a 0d 0a 28 | 46 41 51 20 6d 65 61 6e |/20....(|FAQ mean|
|00000100| 73 20 22 46 72 65 71 75 | 65 6e 74 6c 79 20 41 73 |s "Frequ|ently As|
|00000110| 6b 65 64 20 51 75 65 73 | 74 69 6f 6e 73 22 29 0d |ked Ques|tions").|
|00000120| 0a 0d 0a 20 20 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |... ---|--------|
|00000130| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00000140| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00000150| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00000160| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 0d 0a 20 |--------|-----.. |
|00000170| 20 20 20 20 20 20 20 41 | 6e 79 62 6f 64 79 20 77 | A|nybody w|
|00000180| 68 6f 20 69 73 20 77 69 | 6c 6c 69 6e 67 20 74 6f |ho is wi|lling to|
|00000190| 20 63 6f 6e 74 72 69 62 | 75 74 65 20 61 6e 79 20 | contrib|ute any |
|000001a0| 71 75 65 73 74 69 6f 6e | 20 6f 72 0d 0a 20 20 20 |question| or.. |
|000001b0| 20 20 20 20 20 69 6e 66 | 6f 72 6d 61 74 69 6f 6e | inf|ormation|
|000001c0| 2c 20 70 6c 65 61 73 65 | 20 65 6d 61 69 6c 20 6d |, please| email m|
|000001d0| 65 3b 20 69 66 20 69 74 | 20 69 73 20 72 65 6c 65 |e; if it| is rele|
|000001e0| 76 61 6e 74 2c 0d 0a 20 | 20 20 20 20 20 20 20 49 |vant,.. | I|
|000001f0| 20 77 69 6c 6c 20 69 6e | 63 6f 72 70 6f 72 61 74 | will in|corporat|
|00000200| 65 20 69 74 2e 20 42 75 | 74 3a 20 50 6c 65 61 73 |e it. Bu|t: Pleas|
|00000210| 65 20 66 6f 72 6d 61 74 | 20 79 6f 75 72 20 63 6f |e format| your co|
|00000220| 6e 74 72 69 62 75 74 69 | 6f 6e 0d 0a 20 20 20 20 |ntributi|on.. |
|00000230| 20 20 20 20 61 70 70 72 | 6f 70 72 69 61 74 65 6c | appr|opriatel|
|00000240| 79 20 73 6f 20 74 68 61 | 74 20 49 20 63 61 6e 20 |y so tha|t I can |
|00000250| 6a 75 73 74 20 64 72 6f | 70 20 69 74 20 69 6e 2e |just dro|p it in.|
|00000260| 0d 0a 0d 0a 20 20 20 20 | 20 20 20 20 54 68 65 20 |.... | The |
|00000270| 6d 6f 6e 74 68 6c 79 20 | 70 6f 73 74 69 6e 67 20 |monthly |posting |
|00000280| 64 65 70 61 72 74 73 20 | 61 74 20 74 68 65 20 32 |departs |at the 2|
|00000290| 38 74 68 20 6f 66 20 65 | 76 65 72 79 20 6d 6f 6e |8th of e|very mon|
|000002a0| 74 68 2e 0d 0a 20 20 2d | 2d 2d 2d 2d 2d 2d 2d 2d |th... -|--------|
|000002b0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|000002c0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|000002d0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|000002e0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 0d |--------|-------.|
|000002f0| 0a 0d 0a 54 68 69 73 20 | 69 73 20 61 20 6d 6f 6e |...This |is a mon|
|00000300| 74 68 6c 79 20 70 6f 73 | 74 69 6e 67 20 74 6f 20 |thly pos|ting to |
|00000310| 74 68 65 20 55 73 65 6e | 65 74 20 6e 65 77 73 67 |the Usen|et newsg|
|00000320| 72 6f 75 70 20 63 6f 6d | 70 2e 61 69 2e 6e 65 75 |roup com|p.ai.neu|
|00000330| 72 61 6c 2d 6e 65 74 73 | 0d 0a 28 61 6e 64 20 6e |ral-nets|..(and n|
|00000340| 65 77 73 2e 61 6e 73 77 | 65 72 73 2c 20 77 68 65 |ews.answ|ers, whe|
|00000350| 72 65 20 69 74 20 73 68 | 6f 75 6c 64 20 62 65 20 |re it sh|ould be |
|00000360| 66 69 6e 64 61 62 6c 65 | 20 61 74 20 41 4e 59 20 |findable| at ANY |
|00000370| 74 69 6d 65 29 0d 0a 49 | 74 73 20 70 75 72 70 6f |time)..I|ts purpo|
|00000380| 73 65 20 69 73 20 74 6f | 20 70 72 6f 76 69 64 65 |se is to| provide|
|00000390| 20 62 61 73 69 63 20 69 | 6e 66 6f 72 6d 61 74 69 | basic i|nformati|
|000003a0| 6f 6e 20 66 6f 72 20 69 | 6e 64 69 76 69 64 75 61 |on for i|ndividua|
|000003b0| 6c 73 20 77 68 6f 20 61 | 72 65 0d 0a 6e 65 77 20 |ls who a|re..new |
|000003c0| 74 6f 20 74 68 65 20 66 | 69 65 6c 64 20 6f 66 20 |to the f|ield of |
|000003d0| 6e 65 75 72 61 6c 20 6e | 65 74 77 6f 72 6b 73 20 |neural n|etworks |
|000003e0| 6f 72 20 61 72 65 20 6a | 75 73 74 20 62 65 67 69 |or are j|ust begi|
|000003f0| 6e 6e 69 6e 67 20 74 6f | 20 72 65 61 64 20 74 68 |nning to| read th|
|00000400| 69 73 20 0d 0a 67 72 6f | 75 70 2e 20 49 74 20 73 |is ..gro|up. It s|
|00000410| 68 61 6c 6c 20 68 65 6c | 70 20 74 6f 20 61 76 6f |hall hel|p to avo|
|00000420| 69 64 20 6c 65 6e 67 74 | 68 79 20 64 69 73 63 75 |id lengt|hy discu|
|00000430| 73 73 69 6f 6e 20 6f 66 | 20 71 75 65 73 74 69 6f |ssion of| questio|
|00000440| 6e 73 20 74 68 61 74 20 | 75 73 75 61 6c 6c 79 20 |ns that |usually |
|00000450| 0d 0a 61 72 69 73 65 20 | 66 6f 72 20 62 65 67 69 |..arise |for begi|
|00000460| 6e 6e 65 72 73 20 6f 66 | 20 6f 6e 65 20 6f 72 20 |nners of| one or |
|00000470| 74 68 65 20 6f 74 68 65 | 72 20 6b 69 6e 64 2e 0d |the othe|r kind..|
|00000480| 0a 0d 0a 3e 3e 3e 3e 3e | 20 53 4f 2c 20 50 4c 45 |...>>>>>| SO, PLE|
|00000490| 41 53 45 2c 20 53 45 41 | 52 43 48 20 54 48 49 53 |ASE, SEA|RCH THIS|
|000004a0| 20 50 4f 53 54 49 4e 47 | 20 46 49 52 53 54 20 49 | POSTING| FIRST I|
|000004b0| 46 20 59 4f 55 20 48 41 | 56 45 20 41 20 51 55 45 |F YOU HA|VE A QUE|
|000004c0| 53 54 49 4f 4e 20 3c 3c | 3c 3c 3c 0d 0a 20 20 20 |STION <<|<<<.. |
|000004d0| 20 20 20 20 20 20 20 20 | 20 20 20 20 20 20 20 20 | | |
|000004e0| 20 20 20 20 20 20 20 20 | 61 6e 64 0d 0a 3e 3e 3e | |and..>>>|
|000004f0| 3e 3e 20 44 4f 4e 27 54 | 20 50 4f 53 54 20 41 4e |>> DON'T| POST AN|
|00000500| 53 57 45 52 53 20 54 4f | 20 46 41 51 73 3a 20 50 |SWERS TO| FAQs: P|
|00000510| 4f 49 4e 54 20 54 48 45 | 20 41 53 4b 45 52 20 54 |OINT THE| ASKER T|
|00000520| 4f 20 54 48 49 53 20 50 | 4f 53 54 49 4e 47 20 3c |O THIS P|OSTING <|
|00000530| 3c 3c 3c 3c 0d 0a 0d 0a | 54 68 69 73 20 70 6f 73 |<<<<....|This pos|
|00000540| 74 69 6e 67 20 69 73 20 | 61 72 63 68 69 76 65 64 |ting is |archived|
|00000550| 20 69 6e 20 74 68 65 20 | 70 65 72 69 6f 64 69 63 | in the |periodic|
|00000560| 20 70 6f 73 74 69 6e 67 | 20 61 72 63 68 69 76 65 | posting| archive|
|00000570| 20 6f 6e 0d 0a 68 6f 73 | 74 20 74 72 66 6d 2e 6d | on..hos|t trfm.m|
|00000580| 69 74 2e 65 64 75 20 28 | 61 6e 64 20 6f 6e 20 73 |it.edu (|and on s|
|00000590| 6f 6d 65 20 6f 74 68 65 | 72 20 68 6f 73 74 73 20 |ome othe|r hosts |
|000005a0| 61 73 20 77 65 6c 6c 29 | 2e 0d 0a 4c 6f 6f 6b 20 |as well)|...Look |
|000005b0| 69 6e 20 74 68 65 20 61 | 6e 6f 6e 79 6d 6f 75 73 |in the a|nonymous|
|000005c0| 20 66 74 70 20 64 69 72 | 65 63 74 6f 72 79 20 22 | ftp dir|ectory "|
|000005d0| 2f 70 75 62 2f 75 73 65 | 6e 65 74 2f 6e 65 77 73 |/pub/use|net/news|
|000005e0| 2e 61 6e 73 77 65 72 73 | 22 2c 0d 0a 74 68 65 20 |.answers|",..the |
|000005f0| 66 69 6c 65 6e 61 6d 65 | 20 69 73 20 61 73 20 67 |filename| is as g|
|00000600| 69 76 65 6e 20 69 6e 20 | 74 68 65 20 27 41 72 63 |iven in |the 'Arc|
|00000610| 68 69 76 65 2d 6e 61 6d | 65 3a 27 20 68 65 61 64 |hive-nam|e:' head|
|00000620| 65 72 20 61 62 6f 76 65 | 2e 0d 0a 49 66 20 79 6f |er above|...If yo|
|00000630| 75 20 64 6f 20 6e 6f 74 | 20 68 61 76 65 20 61 6e |u do not| have an|
|00000640| 6f 6e 79 6d 6f 75 73 20 | 66 74 70 20 61 63 63 65 |onymous |ftp acce|
|00000650| 73 73 2c 20 79 6f 75 20 | 63 61 6e 20 61 63 63 65 |ss, you |can acce|
|00000660| 73 73 20 74 68 65 20 61 | 72 63 68 69 76 65 73 0d |ss the a|rchives.|
|00000670| 0a 62 79 20 6d 61 69 6c | 20 73 65 72 76 65 72 20 |.by mail| server |
|00000680| 61 73 20 77 65 6c 6c 2e | 20 20 53 65 6e 64 20 61 |as well.| Send a|
|00000690| 6e 20 45 2d 6d 61 69 6c | 20 6d 65 73 73 61 67 65 |n E-mail| message|
|000006a0| 20 74 6f 0d 0a 6d 61 69 | 6c 2d 73 65 72 76 65 72 | to..mai|l-server|
|000006b0| 40 72 74 66 6d 2e 6d 69 | 74 2e 65 64 75 20 77 69 |@rtfm.mi|t.edu wi|
|000006c0| 74 68 20 22 68 65 6c 70 | 22 20 61 6e 64 20 22 69 |th "help|" and "i|
|000006d0| 6e 64 65 78 22 20 69 6e | 20 74 68 65 20 62 6f 64 |ndex" in| the bod|
|000006e0| 79 20 6f 6e 0d 0a 73 65 | 70 61 72 61 74 65 20 6c |y on..se|parate l|
|000006f0| 69 6e 65 73 20 66 6f 72 | 20 6d 6f 72 65 20 69 6e |ines for| more in|
|00000700| 66 6f 72 6d 61 74 69 6f | 6e 2e 0d 0a 0d 0a 0d 0a |formatio|n.......|
|00000710| 54 68 65 20 6d 6f 6e 74 | 68 6c 79 20 70 6f 73 74 |The mont|hly post|
|00000720| 69 6e 67 20 69 73 20 6e | 6f 74 20 6d 65 61 6e 74 |ing is n|ot meant|
|00000730| 20 74 6f 20 64 69 73 63 | 75 73 73 20 61 6e 79 20 | to disc|uss any |
|00000740| 74 6f 70 69 63 20 65 78 | 68 61 75 73 74 69 76 65 |topic ex|haustive|
|00000750| 6c 79 2e 0d 0a 0d 0a 44 | 69 73 63 6c 61 69 6d 65 |ly.....D|isclaime|
|00000760| 72 3a 20 54 68 69 73 20 | 70 6f 73 74 69 6e 67 20 |r: This |posting |
|00000770| 69 73 20 70 72 6f 76 69 | 64 65 64 20 27 61 73 20 |is provi|ded 'as |
|00000780| 69 73 27 2e 0d 0a 20 20 | 20 20 20 20 20 20 20 20 |is'... | |
|00000790| 20 20 4e 6f 20 77 61 72 | 72 61 6e 74 79 20 77 68 | No war|ranty wh|
|000007a0| 61 74 73 6f 65 76 65 72 | 20 69 73 20 65 78 70 72 |atsoever| is expr|
|000007b0| 65 73 73 65 64 20 6f 72 | 20 69 6d 70 6c 69 65 64 |essed or| implied|
|000007c0| 2c 20 0d 0a 20 20 20 20 | 20 20 20 20 20 20 20 20 |, .. | |
|000007d0| 65 73 70 65 63 69 61 6c | 6c 79 2c 20 6e 6f 20 77 |especial|ly, no w|
|000007e0| 61 72 72 61 6e 74 79 20 | 74 68 61 74 20 74 68 65 |arranty |that the|
|000007f0| 20 69 6e 66 6f 72 6d 61 | 74 69 6f 6e 20 63 6f 6e | informa|tion con|
|00000800| 74 61 69 6e 65 64 20 68 | 65 72 65 69 6e 0d 0a 20 |tained h|erein.. |
|00000810| 20 20 20 20 20 20 20 20 | 20 20 20 69 73 20 63 6f | | is co|
|00000820| 72 72 65 63 74 20 6f 72 | 20 75 73 65 66 75 6c 20 |rrect or| useful |
|00000830| 69 6e 20 61 6e 79 20 77 | 61 79 2c 20 61 6c 74 68 |in any w|ay, alth|
|00000840| 6f 75 67 68 20 62 6f 74 | 68 20 69 73 20 69 6e 74 |ough bot|h is int|
|00000850| 65 6e 64 65 64 2e 0d 0a | 0d 0a 3e 3e 20 54 6f 20 |ended...|..>> To |
|00000860| 66 69 6e 64 20 74 68 65 | 20 61 6e 73 77 65 72 20 |find the| answer |
|00000870| 6f 66 20 71 75 65 73 74 | 69 6f 6e 20 6e 75 6d 62 |of quest|ion numb|
|00000880| 65 72 20 3c 78 3e 20 28 | 69 66 20 70 72 65 73 65 |er <x> (|if prese|
|00000890| 6e 74 20 61 74 20 61 6c | 6c 29 2c 20 73 65 61 72 |nt at al|l), sear|
|000008a0| 63 68 0d 0a 3e 3e 20 66 | 6f 72 20 74 68 65 20 73 |ch..>> f|or the s|
|000008b0| 74 72 69 6e 67 20 22 2d | 41 3c 78 3e 2e 29 22 20 |tring "-|A<x>.)" |
|000008c0| 28 73 6f 20 74 68 65 20 | 61 6e 73 77 65 72 20 74 |(so the |answer t|
|000008d0| 6f 20 71 75 65 73 74 69 | 6f 6e 20 31 32 20 69 73 |o questi|on 12 is|
|000008e0| 20 61 74 20 22 2d 41 31 | 32 2e 29 22 29 0d 0a 0d | at "-A1|2.)")...|
|000008f0| 0a 41 6e 64 20 6e 6f 77 | 2c 20 69 6e 20 74 68 65 |.And now|, in the|
|00000900| 20 65 6e 64 2c 20 77 65 | 20 62 65 67 69 6e 3a 0d | end, we| begin:.|
|00000910| 0a 0d 0a 3d 3d 3d 3d 3d | 3d 3d 3d 3d 3d 3d 3d 3d |...=====|========|
|00000920| 3d 3d 3d 3d 3d 3d 3d 3d | 3d 3d 3d 3d 3d 3d 3d 3d |========|========|
|00000930| 3d 20 51 75 65 73 74 69 | 6f 6e 73 20 3d 3d 3d 3d |= Questi|ons ====|
|00000940| 3d 3d 3d 3d 3d 3d 3d 3d | 3d 3d 3d 3d 3d 3d 3d 3d |========|========|
|00000950| 3d 3d 3d 3d 3d 3d 3d 3d | 3d 3d 0d 0a 0d 0a 28 74 |========|==....(t|
|00000960| 68 65 20 73 68 6f 72 74 | 20 66 6f 72 6d 73 20 61 |he short| forms a|
|00000970| 6e 64 20 6e 6f 6e 2d 63 | 6f 6e 74 69 6e 6f 75 73 |nd non-c|ontinous|
|00000980| 20 6e 75 6d 62 65 72 69 | 6e 67 20 69 73 20 69 6e | numberi|ng is in|
|00000990| 74 65 6e 64 65 64 29 0d | 0a 31 2e 29 20 20 57 68 |tended).|.1.) Wh|
|000009a0| 61 74 20 69 73 20 74 68 | 69 73 20 6e 65 77 73 67 |at is th|is newsg|
|000009b0| 72 6f 75 70 20 66 6f 72 | 20 3f 20 20 48 6f 77 20 |roup for| ? How |
|000009c0| 73 68 61 6c 6c 20 69 74 | 20 62 65 20 75 73 65 64 |shall it| be used|
|000009d0| 20 3f 0d 0a 32 2e 29 20 | 20 57 68 61 74 20 69 73 | ?..2.) | What is|
|000009e0| 20 61 20 6e 65 75 72 61 | 6c 20 6e 65 74 77 6f 72 | a neura|l networ|
|000009f0| 6b 20 28 4e 4e 29 20 3f | 0d 0a 33 2e 29 20 20 57 |k (NN) ?|..3.) W|
|00000a00| 68 61 74 20 63 61 6e 20 | 79 6f 75 20 64 6f 20 77 |hat can |you do w|
|00000a10| 69 74 68 20 61 20 4e 65 | 75 72 61 6c 20 4e 65 74 |ith a Ne|ural Net|
|00000a20| 77 6f 72 6b 20 61 6e 64 | 20 77 68 61 74 20 6e 6f |work and| what no|
|00000a30| 74 20 3f 0d 0a 34 2e 29 | 20 20 57 68 6f 20 69 73 |t ?..4.)| Who is|
|00000a40| 20 63 6f 6e 63 65 72 6e | 65 64 20 77 69 74 68 20 | concern|ed with |
|00000a50| 4e 65 75 72 61 6c 20 4e | 65 74 77 6f 72 6b 73 20 |Neural N|etworks |
|00000a60| 3f 0d 0a 0d 0a 36 2e 29 | 20 20 57 68 61 74 20 64 |?....6.)| What d|
|00000a70| 6f 65 73 20 27 62 61 63 | 6b 70 72 6f 70 27 20 6d |oes 'bac|kprop' m|
|00000a80| 65 61 6e 20 3f 0d 0a 37 | 2e 29 20 20 48 6f 77 20 |ean ?..7|.) How |
|00000a90| 6d 61 6e 79 20 6c 65 61 | 72 6e 69 6e 67 20 6d 65 |many lea|rning me|
|00000aa0| 74 68 6f 64 73 20 66 6f | 72 20 4e 4e 73 20 65 78 |thods fo|r NNs ex|
|00000ab0| 69 73 74 20 3f 20 20 57 | 68 69 63 68 20 3f 0d 0a |ist ? W|hich ?..|
|00000ac0| 38 2e 29 20 20 57 68 61 | 74 20 61 62 6f 75 74 20 |8.) Wha|t about |
|00000ad0| 47 65 6e 65 74 69 63 20 | 41 6c 67 6f 72 69 74 68 |Genetic |Algorith|
|00000ae0| 6d 73 20 3f 0d 0a 39 2e | 29 20 20 57 68 61 74 20 |ms ?..9.|) What |
|00000af0| 61 62 6f 75 74 20 46 75 | 7a 7a 79 20 4c 6f 67 69 |about Fu|zzy Logi|
|00000b00| 63 20 3f 0d 0a 0d 0a 31 | 30 2e 29 20 47 6f 6f 64 |c ?....1|0.) Good|
|00000b10| 20 69 6e 74 72 6f 64 75 | 63 74 6f 72 79 20 6c 69 | introdu|ctory li|
|00000b20| 74 65 72 61 74 75 72 65 | 20 61 62 6f 75 74 20 4e |terature| about N|
|00000b30| 65 75 72 61 6c 20 4e 65 | 74 77 6f 72 6b 73 20 3f |eural Ne|tworks ?|
|00000b40| 0d 0a 31 31 2e 29 20 41 | 6e 79 20 6a 6f 75 72 6e |..11.) A|ny journ|
|00000b50| 61 6c 73 20 61 6e 64 20 | 6d 61 67 61 7a 69 6e 65 |als and |magazine|
|00000b60| 73 20 61 62 6f 75 74 20 | 4e 65 75 72 61 6c 20 4e |s about |Neural N|
|00000b70| 65 74 77 6f 72 6b 73 20 | 3f 0d 0a 31 32 2e 29 20 |etworks |?..12.) |
|00000b80| 54 68 65 20 6d 6f 73 74 | 20 69 6d 70 6f 72 74 61 |The most| importa|
|00000b90| 6e 74 20 63 6f 6e 66 65 | 72 65 6e 63 65 73 20 63 |nt confe|rences c|
|00000ba0| 6f 6e 63 65 72 6e 65 64 | 20 77 69 74 68 20 4e 65 |oncerned| with Ne|
|00000bb0| 75 72 61 6c 20 4e 65 74 | 77 6f 72 6b 73 20 3f 0d |ural Net|works ?.|
|00000bc0| 0a 31 33 2e 29 20 4e 65 | 75 72 61 6c 20 4e 65 74 |.13.) Ne|ural Net|
|00000bd0| 77 6f 72 6b 20 41 73 73 | 6f 63 69 61 74 69 6f 6e |work Ass|ociation|
|00000be0| 73 20 3f 0d 0a 31 34 2e | 29 20 4f 74 68 65 72 20 |s ?..14.|) Other |
|00000bf0| 73 6f 75 72 63 65 73 20 | 6f 66 20 69 6e 66 6f 72 |sources |of infor|
|00000c00| 6d 61 74 69 6f 6e 20 61 | 62 6f 75 74 20 4e 4e 73 |mation a|bout NNs|
|00000c10| 20 3f 0d 0a 0d 0a 3d 3d | 3d 3d 3d 3d 3d 3d 3d 3d | ?....==|========|
|00000c20| 3d 3d 3d 3d 3d 3d 3d 3d | 3d 3d 3d 3d 3d 3d 3d 3d |========|========|
|00000c30| 3d 3d 3d 3d 20 41 6e 73 | 77 65 72 73 20 3d 3d 3d |==== Ans|wers ===|
|00000c40| 3d 3d 3d 3d 3d 3d 3d 3d | 3d 3d 3d 3d 3d 3d 3d 3d |========|========|
|00000c50| 3d 3d 3d 3d 3d 3d 3d 3d | 3d 3d 3d 0d 0a 0d 0a 2d |========|===....-|
|00000c60| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00000c70| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00000c80| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00000c90| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00000ca0| 2d 2d 2d 2d 2d 2d 2d 0d | 0a 0d 0a 2d 41 31 2e 29 |-------.|...-A1.)|
|00000cb0| 20 20 57 68 61 74 20 69 | 73 20 74 68 69 73 20 6e | What i|s this n|
|00000cc0| 65 77 73 67 72 6f 75 70 | 20 66 6f 72 20 3f 0d 0a |ewsgroup| for ?..|
|00000cd0| 0d 0a 54 68 65 20 6e 65 | 77 73 67 72 6f 75 70 20 |..The ne|wsgroup |
|00000ce0| 63 6f 6d 70 2e 61 69 2e | 6e 65 75 72 61 6c 2d 6e |comp.ai.|neural-n|
|00000cf0| 65 74 73 20 69 73 20 69 | 6e 74 65 64 65 64 20 61 |ets is i|nteded a|
|00000d00| 73 20 61 20 66 6f 72 75 | 6d 20 66 6f 72 20 70 65 |s a foru|m for pe|
|00000d10| 6f 70 6c 65 20 77 68 6f | 20 77 61 6e 74 0d 0a 74 |ople who| want..t|
|00000d20| 6f 20 75 73 65 20 6f 72 | 20 65 78 70 6c 6f 72 65 |o use or| explore|
|00000d30| 20 74 68 65 20 63 61 70 | 61 62 69 6c 69 74 69 65 | the cap|abilitie|
|00000d40| 73 20 6f 66 20 4e 65 75 | 72 61 6c 20 4e 65 74 77 |s of Neu|ral Netw|
|00000d50| 6f 72 6b 73 20 6f 72 20 | 4e 65 75 72 61 6c 2d 4e |orks or |Neural-N|
|00000d60| 65 74 77 6f 72 6b 2d 6c | 69 6b 65 0d 0a 73 74 72 |etwork-l|ike..str|
|00000d70| 75 63 74 75 72 65 73 2e | 0d 0a 0d 0a 54 68 65 72 |uctures.|....Ther|
|00000d80| 65 20 73 68 6f 75 6c 64 | 20 62 65 20 74 68 65 20 |e should| be the |
|00000d90| 66 6f 6c 6c 6f 77 69 6e | 67 20 74 79 70 65 73 20 |followin|g types |
|00000da0| 6f 66 20 61 72 74 69 63 | 6c 65 73 20 69 6e 20 74 |of artic|les in t|
|00000db0| 68 69 73 20 6e 65 77 73 | 67 72 6f 75 70 3a 0d 0a |his news|group:..|
|00000dc0| 0d 0a 31 2e 20 52 65 71 | 75 65 73 74 73 0d 0a 0d |..1. Req|uests...|
|00000dd0| 0a 20 20 52 65 71 75 65 | 73 74 73 20 61 72 65 20 |. Reque|sts are |
|00000de0| 61 72 74 69 63 6c 65 73 | 20 6f 66 20 74 68 65 20 |articles| of the |
|00000df0| 66 6f 72 6d 20 0d 0a 20 | 20 20 20 22 49 20 61 6d |form .. | "I am|
|00000e00| 20 6c 6f 6f 6b 69 6e 67 | 20 66 6f 72 20 58 22 0d | looking| for X".|
|00000e10| 0a 20 20 77 68 65 72 65 | 20 58 20 69 73 20 73 6f |. where| X is so|
|00000e20| 6d 65 74 68 69 6e 67 20 | 70 75 62 6c 69 63 20 6c |mething |public l|
|00000e30| 69 6b 65 20 61 20 62 6f | 6f 6b 2c 20 61 6e 20 61 |ike a bo|ok, an a|
|00000e40| 72 74 69 63 6c 65 2c 20 | 61 20 70 69 65 63 65 20 |rticle, |a piece |
|00000e50| 6f 66 20 73 6f 66 74 77 | 61 72 65 2e 0d 0a 0d 0a |of softw|are.....|
|00000e60| 20 20 49 66 20 6d 75 6c | 74 69 70 6c 65 20 64 69 | If mul|tiple di|
|00000e70| 66 66 65 72 65 6e 74 20 | 61 6e 73 77 65 72 73 20 |fferent |answers |
|00000e80| 63 61 6e 20 62 65 20 65 | 78 70 65 63 74 65 64 2c |can be e|xpected,|
|00000e90| 20 74 68 65 20 70 65 72 | 73 6f 6e 20 6d 61 6b 69 | the per|son maki|
|00000ea0| 6e 67 20 74 68 65 20 0d | 0a 20 20 72 65 71 75 65 |ng the .|. reque|
|00000eb0| 73 74 20 73 68 6f 75 6c | 64 20 70 72 65 70 61 72 |st shoul|d prepar|
|00000ec0| 65 20 74 6f 20 6d 61 6b | 65 20 61 20 73 75 6d 6d |e to mak|e a summ|
|00000ed0| 61 72 79 20 6f 66 20 74 | 68 65 20 61 6e 73 77 65 |ary of t|he answe|
|00000ee0| 72 73 20 68 65 2f 73 68 | 65 20 67 6f 74 0d 0a 20 |rs he/sh|e got.. |
|00000ef0| 20 61 6e 64 20 61 6e 6e | 6f 75 6e 63 65 20 74 6f | and ann|ounce to|
|00000f00| 20 64 6f 20 73 6f 20 77 | 69 74 68 20 61 20 70 68 | do so w|ith a ph|
|00000f10| 72 61 73 65 20 6c 69 6b | 65 0d 0a 20 20 20 20 22 |rase lik|e.. "|
|00000f20| 50 6c 65 61 73 65 20 65 | 6d 61 69 6c 2c 20 49 27 |Please e|mail, I'|
|00000f30| 6c 6c 20 73 75 6d 6d 61 | 72 69 7a 65 22 0d 0a 20 |ll summa|rize".. |
|00000f40| 20 61 74 20 74 68 65 20 | 65 6e 64 20 6f 66 20 74 | at the |end of t|
|00000f50| 68 65 20 70 6f 73 74 69 | 6e 67 2e 0d 0a 20 20 0d |he posti|ng... .|
|00000f60| 0a 20 20 54 68 65 20 53 | 75 62 6a 65 63 74 20 6c |. The S|ubject l|
|00000f70| 69 6e 65 20 6f 66 20 74 | 68 65 20 70 6f 73 74 69 |ine of t|he posti|
|00000f80| 6e 67 20 73 68 6f 75 6c | 64 20 74 68 65 6e 20 62 |ng shoul|d then b|
|00000f90| 65 20 73 6f 6d 65 74 68 | 69 6e 67 20 6c 69 6b 65 |e someth|ing like|
|00000fa0| 0d 0a 20 20 20 20 22 52 | 65 71 75 65 73 74 3a 20 |.. "R|equest: |
|00000fb0| 58 22 0d 0a 0d 0a 32 2e | 20 51 75 65 73 74 69 6f |X"....2.| Questio|
|00000fc0| 6e 73 0d 0a 0d 0a 20 20 | 41 73 20 6f 70 70 6f 73 |ns.... |As oppos|
|00000fd0| 65 64 20 74 6f 20 72 65 | 71 75 65 73 74 73 2c 20 |ed to re|quests, |
|00000fe0| 71 75 65 73 74 69 6f 6e | 73 20 61 72 65 20 63 6f |question|s are co|
|00000ff0| 6e 63 65 72 6e 65 64 20 | 77 69 74 68 20 73 6f 6d |ncerned |with som|
|00001000| 65 74 68 69 6e 67 20 73 | 6f 20 73 70 65 63 69 66 |ething s|o specif|
|00001010| 69 63 0d 0a 20 20 74 68 | 61 74 20 67 65 6e 65 72 |ic.. th|at gener|
|00001020| 61 6c 20 69 6e 74 65 72 | 65 73 74 20 63 61 6e 6e |al inter|est cann|
|00001030| 6f 74 20 72 65 61 64 69 | 6c 79 20 62 65 20 61 73 |ot readi|ly be as|
|00001040| 73 75 6d 65 64 2e 0d 0a | 20 20 49 66 20 74 68 65 |sumed...| If the|
|00001050| 20 70 6f 73 74 65 72 20 | 74 68 69 6e 6b 73 20 74 | poster |thinks t|
|00001060| 68 61 74 20 74 68 65 20 | 74 6f 70 69 63 20 69 73 |hat the |topic is|
|00001070| 20 6f 66 20 73 6f 6d 65 | 20 67 65 6e 65 72 61 6c | of some| general|
|00001080| 20 69 6e 74 65 72 65 73 | 74 2c 0d 0a 20 20 68 65 | interes|t,.. he|
|00001090| 2f 73 68 65 20 73 68 6f | 75 6c 64 20 61 6e 6e 6f |/she sho|uld anno|
|000010a0| 75 6e 63 65 20 61 20 73 | 75 6d 6d 61 72 79 20 28 |unce a s|ummary (|
|000010b0| 73 65 65 20 61 62 6f 76 | 65 29 2e 0d 0a 0d 0a 20 |see abov|e)..... |
|000010c0| 20 54 68 65 20 53 75 62 | 6a 65 63 74 20 6c 69 6e | The Sub|ject lin|
|000010d0| 65 20 6f 66 20 74 68 65 | 20 70 6f 73 74 69 6e 67 |e of the| posting|
|000010e0| 20 73 68 6f 75 6c 64 20 | 62 65 20 73 6f 6d 65 74 | should |be somet|
|000010f0| 68 69 6e 67 20 6c 69 6b | 65 0d 0a 20 20 20 20 22 |hing lik|e.. "|
|00001100| 51 75 65 73 74 69 6f 6e | 3a 20 74 68 69 73 2d 61 |Question|: this-a|
|00001110| 6e 64 2d 74 68 61 74 22 | 0d 0a 20 20 6f 72 20 68 |nd-that"|.. or h|
|00001120| 61 76 65 20 74 68 65 20 | 66 6f 72 6d 20 6f 66 20 |ave the |form of |
|00001130| 61 20 71 75 65 73 74 69 | 6f 6e 20 28 69 2e 65 2e |a questi|on (i.e.|
|00001140| 2c 20 65 6e 64 20 77 69 | 74 68 20 61 20 71 75 65 |, end wi|th a que|
|00001150| 73 74 69 6f 6e 20 6d 61 | 72 6b 29 0d 0a 0d 0a 33 |stion ma|rk)....3|
|00001160| 2e 20 41 6e 73 77 65 72 | 73 0d 0a 0d 0a 20 20 54 |. Answer|s.... T|
|00001170| 68 65 73 65 20 61 72 65 | 20 72 65 61 63 74 69 6f |hese are| reactio|
|00001180| 6e 73 20 74 6f 20 71 75 | 65 73 74 69 6f 6e 73 20 |ns to qu|estions |
|00001190| 6f 72 20 72 65 71 75 65 | 73 74 73 2e 0d 0a 20 20 |or reque|sts... |
|000011a0| 41 73 20 61 20 72 75 6c | 65 20 6f 66 20 74 68 75 |As a rul|e of thu|
|000011b0| 6d 62 20 61 72 74 69 63 | 6c 65 73 20 6f 66 20 74 |mb artic|les of t|
|000011c0| 79 70 65 20 22 61 6e 73 | 77 65 72 22 20 73 68 6f |ype "ans|wer" sho|
|000011d0| 75 6c 64 20 62 65 20 72 | 61 72 65 2e 0d 0a 20 20 |uld be r|are... |
|000011e0| 49 64 65 61 6c 6c 79 2c | 20 69 6e 20 6d 6f 73 74 |Ideally,| in most|
|000011f0| 20 63 61 73 65 73 20 65 | 69 74 68 65 72 20 74 68 | cases e|ither th|
|00001200| 65 20 61 6e 73 77 65 72 | 20 69 73 20 74 6f 6f 20 |e answer| is too |
|00001210| 73 70 65 63 69 66 69 63 | 20 74 6f 20 62 65 20 6f |specific| to be o|
|00001220| 66 20 67 65 6e 65 72 61 | 6c 20 0d 0a 20 20 69 6e |f genera|l .. in|
|00001230| 74 65 72 65 73 74 20 28 | 61 6e 64 20 73 68 6f 75 |terest (|and shou|
|00001240| 6c 64 20 74 68 75 73 20 | 62 65 20 65 2d 6d 61 69 |ld thus |be e-mai|
|00001250| 6c 65 64 20 74 6f 20 74 | 68 65 20 70 6f 73 74 65 |led to t|he poste|
|00001260| 72 29 20 6f 72 20 61 20 | 73 75 6d 6d 61 72 79 0d |r) or a |summary.|
|00001270| 0a 20 20 77 61 73 20 61 | 6e 6e 6f 75 6e 63 65 64 |. was a|nnounced|
|00001280| 20 77 69 74 68 20 74 68 | 65 20 71 75 65 73 74 69 | with th|e questi|
|00001290| 6f 6e 20 6f 72 20 72 65 | 71 75 65 73 74 20 28 61 |on or re|quest (a|
|000012a0| 6e 64 20 61 6e 73 77 65 | 72 73 20 73 68 6f 75 6c |nd answe|rs shoul|
|000012b0| 64 0d 0a 20 20 74 68 75 | 73 20 62 65 20 65 2d 6d |d.. thu|s be e-m|
|000012c0| 61 69 6c 65 64 20 74 6f | 20 74 68 65 20 70 6f 73 |ailed to| the pos|
|000012d0| 74 65 72 29 2e 0d 0a 0d | 0a 20 20 54 68 65 20 73 |ter)....|. The s|
|000012e0| 75 62 6a 65 63 74 20 6c | 69 6e 65 73 20 6f 66 20 |ubject l|ines of |
|000012f0| 61 6e 73 77 65 72 73 20 | 61 72 65 20 61 75 74 6f |answers |are auto|
|00001300| 6d 61 74 69 63 61 6c 6c | 79 20 61 64 6a 75 73 74 |maticall|y adjust|
|00001310| 65 64 20 62 79 20 74 68 | 65 20 0d 0a 20 20 6e 65 |ed by th|e .. ne|
|00001320| 77 73 20 73 6f 66 74 77 | 61 72 65 2e 0d 0a 0d 0a |ws softw|are.....|
|00001330| 34 2e 20 53 75 6d 6d 61 | 72 69 65 73 0d 0a 0d 0a |4. Summa|ries....|
|00001340| 20 20 49 6e 20 61 6c 6c | 20 63 61 73 65 73 20 6f | In all| cases o|
|00001350| 66 20 72 65 71 75 65 73 | 74 73 20 6f 72 20 71 75 |f reques|ts or qu|
|00001360| 65 73 74 69 6f 6e 73 20 | 74 68 65 20 61 6e 73 77 |estions |the answ|
|00001370| 65 72 73 20 66 6f 72 20 | 77 68 69 63 68 20 63 61 |ers for |which ca|
|00001380| 6e 20 62 65 20 61 73 73 | 75 6d 65 64 0d 0a 20 20 |n be ass|umed.. |
|00001390| 74 6f 20 62 65 20 6f 66 | 20 73 6f 6d 65 20 67 65 |to be of| some ge|
|000013a0| 6e 65 72 61 6c 20 69 6e | 74 65 72 65 73 74 2c 20 |neral in|terest, |
|000013b0| 74 68 65 20 70 6f 73 74 | 65 72 20 6f 66 20 74 68 |the post|er of th|
|000013c0| 65 20 72 65 71 75 65 73 | 74 20 6f 72 20 71 75 65 |e reques|t or que|
|000013d0| 73 74 69 6f 6e 20 0d 0a | 20 20 73 68 61 6c 6c 20 |stion ..| shall |
|000013e0| 73 75 6d 6d 61 72 69 7a | 65 20 74 68 65 20 61 6e |summariz|e the an|
|000013f0| 73 65 72 73 20 68 65 2f | 73 68 65 20 72 65 63 65 |sers he/|she rece|
|00001400| 69 76 65 64 2e 0d 0a 20 | 20 53 75 63 68 20 61 20 |ived... | Such a |
|00001410| 73 75 6d 6d 61 72 79 20 | 73 68 6f 75 6c 64 20 62 |summary |should b|
|00001420| 65 20 61 6e 6e 6f 75 6e | 63 65 64 20 69 6e 20 74 |e announ|ced in t|
|00001430| 68 65 20 6f 72 69 67 69 | 6e 61 6c 20 70 6f 73 74 |he origi|nal post|
|00001440| 69 6e 67 20 6f 66 20 74 | 68 65 20 71 75 65 73 74 |ing of t|he quest|
|00001450| 69 6f 6e 0d 0a 20 20 6f | 72 20 72 65 71 75 65 73 |ion.. o|r reques|
|00001460| 74 20 77 69 74 68 20 61 | 20 70 68 72 61 73 65 20 |t with a| phrase |
|00001470| 6c 69 6b 65 0d 0a 20 20 | 20 20 22 50 6c 65 61 73 |like.. | "Pleas|
|00001480| 65 20 61 6e 73 77 65 72 | 20 62 79 20 65 6d 61 69 |e answer| by emai|
|00001490| 6c 2c 20 49 27 6c 6c 20 | 73 75 6d 6d 61 72 69 7a |l, I'll |summariz|
|000014a0| 65 22 0d 0a 0d 0a 20 20 | 49 6e 20 73 75 63 68 20 |e".... |In such |
|000014b0| 61 20 63 61 73 65 20 61 | 6e 73 77 65 72 73 20 73 |a case a|nswers s|
|000014c0| 68 6f 75 6c 64 20 4e 4f | 54 20 62 65 20 70 6f 73 |hould NO|T be pos|
|000014d0| 74 65 64 20 74 6f 20 74 | 68 65 20 6e 65 77 73 67 |ted to t|he newsg|
|000014e0| 72 6f 75 70 20 62 75 74 | 20 69 6e 73 74 65 61 64 |roup but| instead|
|000014f0| 0d 0a 20 20 62 65 20 6d | 61 69 6c 65 64 20 74 6f |.. be m|ailed to|
|00001500| 20 74 68 65 20 70 6f 73 | 74 65 72 20 77 68 6f 20 | the pos|ter who |
|00001510| 63 6f 6c 6c 65 63 74 73 | 20 61 6e 64 20 72 65 76 |collects| and rev|
|00001520| 69 65 77 73 20 74 68 65 | 6d 2e 0d 0a 20 20 41 66 |iews the|m... Af|
|00001530| 74 65 72 20 61 62 6f 75 | 74 20 31 30 20 74 6f 20 |ter abou|t 10 to |
|00001540| 32 30 20 64 61 79 73 20 | 66 72 6f 6d 20 74 68 65 |20 days |from the|
|00001550| 20 6f 72 69 67 69 6e 61 | 6c 20 70 6f 73 74 69 6e | origina|l postin|
|00001560| 67 2c 20 69 74 73 20 70 | 6f 73 74 65 72 20 73 68 |g, its p|oster sh|
|00001570| 6f 75 6c 64 20 0d 0a 20 | 20 6d 61 6b 65 20 74 68 |ould .. | make th|
|00001580| 65 20 73 75 6d 6d 61 72 | 79 20 6f 66 20 61 6e 73 |e summar|y of ans|
|00001590| 77 65 72 73 20 61 6e 64 | 20 70 6f 73 74 20 69 74 |wers and| post it|
|000015a0| 20 74 6f 20 74 68 65 20 | 6e 65 74 2e 0d 0a 0d 0a | to the |net.....|
|000015b0| 20 20 53 6f 6d 65 20 63 | 61 72 65 20 73 68 6f 75 | Some c|are shou|
|000015c0| 6c 64 20 62 65 20 69 6e | 76 65 73 74 65 64 20 69 |ld be in|vested i|
|000015d0| 6e 74 6f 20 61 20 73 75 | 6d 6d 61 72 79 3a 0d 0a |nto a su|mmary:..|
|000015e0| 20 20 61 29 20 73 69 6d | 70 6c 65 20 63 6f 6e 63 | a) sim|ple conc|
|000015f0| 61 74 65 6e 61 74 69 6f | 6e 20 6f 66 20 61 6c 6c |atenatio|n of all|
|00001600| 20 74 68 65 20 61 6e 73 | 77 65 72 73 20 69 73 20 | the ans|wers is |
|00001610| 6e 6f 74 20 65 6e 6f 75 | 67 68 3b 0d 0a 20 20 20 |not enou|gh;.. |
|00001620| 20 20 69 6e 73 74 65 61 | 64 20 72 65 64 75 6e 64 | instea|d redund|
|00001630| 61 6e 63 69 65 73 2c 20 | 69 72 72 65 6c 65 76 61 |ancies, |irreleva|
|00001640| 6e 63 69 65 73 2c 20 76 | 65 72 62 6f 73 69 74 69 |ncies, v|erbositi|
|00001650| 65 73 20 61 6e 64 0d 0a | 20 20 20 20 20 65 72 72 |es and..| err|
|00001660| 6f 72 73 20 6d 75 73 74 | 20 62 65 20 66 69 6c 74 |ors must| be filt|
|00001670| 65 72 65 64 20 6f 75 74 | 20 28 61 73 20 67 6f 6f |ered out| (as goo|
|00001680| 64 20 61 73 20 70 6f 73 | 73 69 62 6c 65 29 2c 0d |d as pos|sible),.|
|00001690| 0a 20 20 62 29 20 74 68 | 65 20 61 6e 73 77 65 72 |. b) th|e answer|
|000016a0| 73 20 73 68 61 6c 6c 20 | 62 65 20 73 65 70 61 72 |s shall |be separ|
|000016b0| 61 74 65 64 20 63 6c 65 | 61 72 6c 79 0d 0a 20 20 |ated cle|arly.. |
|000016c0| 63 29 20 74 68 65 20 63 | 6f 6e 74 72 69 62 75 74 |c) the c|ontribut|
|000016d0| 6f 72 73 20 6f 66 20 74 | 68 65 20 69 6e 64 69 76 |ors of t|he indiv|
|000016e0| 69 64 75 61 6c 20 61 6e | 73 77 65 72 73 20 73 68 |idual an|swers sh|
|000016f0| 61 6c 6c 20 62 65 20 69 | 64 65 6e 74 69 66 69 61 |all be i|dentifia|
|00001700| 62 6c 65 0d 0a 20 20 20 | 20 20 28 75 6e 6c 65 73 |ble.. | (unles|
|00001710| 73 20 74 68 65 79 20 72 | 65 71 75 65 73 74 65 64 |s they r|equested|
|00001720| 20 74 6f 20 72 65 6d 61 | 69 6e 20 61 6e 6f 6e 79 | to rema|in anony|
|00001730| 6d 6f 75 73 20 5b 79 65 | 73 2c 20 74 68 61 74 20 |mous [ye|s, that |
|00001740| 68 61 70 70 65 6e 73 5d | 29 0d 0a 20 20 64 29 20 |happens]|).. d) |
|00001750| 74 68 65 20 73 75 6d 6d | 61 72 79 20 73 68 61 6c |the summ|ary shal|
|00001760| 6c 20 73 74 61 72 74 20 | 77 69 74 68 20 74 68 65 |l start |with the|
|00001770| 20 22 71 75 69 6e 74 65 | 73 73 65 6e 63 65 22 20 | "quinte|ssence" |
|00001780| 6f 66 20 74 68 65 20 61 | 6e 73 77 65 72 73 2c 0d |of the a|nswers,.|
|00001790| 0a 20 20 20 20 20 61 73 | 20 73 65 65 6e 20 62 79 |. as| seen by|
|000017a0| 20 74 68 65 20 6f 72 69 | 67 69 6e 61 6c 20 70 6f | the ori|ginal po|
|000017b0| 73 74 65 72 0d 0a 20 20 | 65 29 20 41 20 73 75 6d |ster.. |e) A sum|
|000017c0| 6d 61 72 79 20 73 68 6f | 75 6c 64 2c 20 77 68 65 |mary sho|uld, whe|
|000017d0| 6e 20 70 6f 73 74 65 64 | 2c 20 63 6c 65 61 72 6c |n posted|, clearl|
|000017e0| 79 20 62 65 20 69 6e 64 | 69 63 61 74 65 64 20 74 |y be ind|icated t|
|000017f0| 6f 20 62 65 20 6f 6e 65 | 0d 0a 20 20 20 20 20 62 |o be one|.. b|
|00001800| 79 20 67 69 76 69 6e 67 | 20 69 74 20 61 20 53 75 |y giving| it a Su|
|00001810| 62 6a 65 63 74 20 6c 69 | 6e 65 20 73 74 61 72 74 |bject li|ne start|
|00001820| 69 6e 67 20 77 69 74 68 | 20 22 53 75 6d 6d 61 72 |ing with| "Summar|
|00001830| 79 3a 22 0d 0a 0d 0a 20 | 20 4e 6f 74 65 20 74 68 |y:".... | Note th|
|00001840| 61 74 20 61 20 67 6f 6f | 64 20 73 75 6d 6d 61 72 |at a goo|d summar|
|00001850| 79 20 69 73 20 70 75 72 | 65 20 67 6f 6c 64 20 66 |y is pur|e gold f|
|00001860| 6f 72 20 74 68 65 20 72 | 65 73 74 20 6f 66 20 74 |or the r|est of t|
|00001870| 68 65 20 6e 65 77 73 67 | 72 6f 75 70 0d 0a 20 20 |he newsg|roup.. |
|00001880| 63 6f 6d 6d 75 6e 69 74 | 79 2c 20 73 6f 20 73 75 |communit|y, so su|
|00001890| 6d 6d 61 72 79 20 77 6f | 72 6b 20 77 69 6c 6c 20 |mmary wo|rk will |
|000018a0| 62 65 20 6d 6f 73 74 20 | 61 70 70 72 65 63 69 61 |be most |apprecia|
|000018b0| 74 65 64 20 62 79 20 61 | 6c 6c 20 6f 66 20 75 73 |ted by a|ll of us|
|000018c0| 2e 0d 0a 20 20 28 47 6f | 6f 64 20 73 75 6d 6d 61 |... (Go|od summa|
|000018d0| 72 69 65 73 20 61 72 65 | 20 6d 6f 72 65 20 76 61 |ries are| more va|
|000018e0| 6c 75 61 62 6c 65 20 74 | 68 61 6e 20 61 6e 79 20 |luable t|han any |
|000018f0| 6d 6f 64 65 72 61 74 6f | 72 20 21 20 20 3a 2d 3e |moderato|r ! :->|
|00001900| 20 29 0d 0a 0d 0a 35 2e | 20 41 6e 6e 6f 75 6e 63 | )....5.| Announc|
|00001910| 65 6d 65 6e 74 73 0d 0a | 0d 0a 20 20 53 6f 6d 65 |ements..|.. Some|
|00001920| 20 61 72 74 69 63 6c 65 | 73 20 6e 65 76 65 72 20 | article|s never |
|00001930| 6e 65 65 64 20 61 6e 79 | 20 70 75 62 6c 69 63 20 |need any| public |
|00001940| 72 65 61 63 74 69 6f 6e | 2e 0d 0a 20 20 54 68 65 |reaction|... The|
|00001950| 73 65 20 61 72 65 20 63 | 61 6c 6c 65 64 20 61 6e |se are c|alled an|
|00001960| 6e 6f 75 6e 63 65 6d 65 | 6e 74 73 20 28 66 6f 72 |nounceme|nts (for|
|00001970| 20 69 6e 73 74 61 6e 63 | 65 20 66 6f 72 20 61 20 | instanc|e for a |
|00001980| 77 6f 72 6b 73 68 6f 70 | 2c 0d 0a 20 20 63 6f 6e |workshop|,.. con|
|00001990| 66 65 72 65 6e 63 65 20 | 6f 72 20 74 68 65 20 61 |ference |or the a|
|000019a0| 76 61 69 6c 61 62 69 6c | 69 74 79 20 6f 66 20 73 |vailabil|ity of s|
|000019b0| 6f 6d 65 20 74 65 63 68 | 6e 69 63 61 6c 20 72 65 |ome tech|nical re|
|000019c0| 70 6f 72 74 20 6f 72 0d | 0a 20 20 73 6f 66 74 77 |port or.|. softw|
|000019d0| 61 72 65 20 73 79 73 74 | 65 6d 29 2e 0d 0a 0d 0a |are syst|em).....|
|000019e0| 20 20 41 6e 6e 6f 75 6e | 63 65 6d 65 6e 74 73 20 | Announ|cements |
|000019f0| 73 68 6f 75 6c 64 20 62 | 65 20 63 6c 65 61 72 6c |should b|e clearl|
|00001a00| 79 20 69 6e 64 69 63 61 | 74 65 64 20 74 6f 20 62 |y indica|ted to b|
|00001a10| 65 20 73 75 63 68 20 62 | 79 20 67 69 76 69 6e 67 |e such b|y giving|
|00001a20| 0d 0a 20 20 74 68 65 6d | 20 61 20 73 75 62 6a 65 |.. them| a subje|
|00001a30| 63 74 20 6c 69 6e 65 20 | 6f 66 20 74 68 65 20 66 |ct line |of the f|
|00001a40| 6f 72 6d 0d 0a 20 20 20 | 20 22 41 6e 6e 6f 75 6e |orm.. | "Announ|
|00001a50| 63 65 6d 65 6e 74 3a 20 | 74 68 69 73 2d 61 6e 64 |cement: |this-and|
|00001a60| 2d 74 68 61 74 22 0d 0a | 0d 0a 36 2e 20 52 65 70 |-that"..|..6. Rep|
|00001a70| 6f 72 74 73 0d 0a 0d 0a | 20 20 53 6f 6d 65 74 69 |orts....| Someti|
|00001a80| 6d 65 73 20 70 65 6f 70 | 6c 65 20 73 70 6f 6e 74 |mes peop|le spont|
|00001a90| 61 6e 65 6f 75 73 6c 79 | 20 77 61 6e 74 20 74 6f |aneously| want to|
|00001aa0| 20 72 65 70 6f 72 74 20 | 73 6f 6d 65 74 68 69 6e | report |somethin|
|00001ab0| 67 20 74 6f 20 74 68 65 | 0d 0a 20 20 6e 65 77 73 |g to the|.. news|
|00001ac0| 67 72 6f 75 70 2e 20 54 | 68 69 73 20 6d 69 67 68 |group. T|his migh|
|00001ad0| 74 20 62 65 20 73 70 65 | 63 69 61 6c 20 65 78 70 |t be spe|cial exp|
|00001ae0| 65 72 69 65 6e 63 65 73 | 20 77 69 74 68 20 73 6f |eriences| with so|
|00001af0| 6d 65 20 73 6f 66 74 77 | 61 72 65 2c 0d 0a 20 20 |me softw|are,.. |
|00001b00| 72 65 73 75 6c 74 73 20 | 6f 66 20 6f 77 6e 20 65 |results |of own e|
|00001b10| 78 70 65 72 69 6d 65 6e | 74 73 20 6f 72 20 63 6f |xperimen|ts or co|
|00001b20| 6e 63 65 70 74 75 61 6c | 20 77 6f 72 6b 2c 20 6f |nceptual| work, o|
|00001b30| 72 20 65 73 70 65 63 69 | 61 6c 6c 79 20 0d 0a 20 |r especi|ally .. |
|00001b40| 20 69 6e 74 65 72 65 73 | 74 69 6e 67 20 69 6e 66 | interes|ting inf|
|00001b50| 6f 72 6d 61 74 69 6f 6e | 20 66 72 6f 6d 20 73 6f |ormation| from so|
|00001b60| 6d 65 77 68 65 72 65 20 | 65 6c 73 65 2e 0d 0a 0d |mewhere |else....|
|00001b70| 0a 20 20 52 65 70 6f 72 | 74 73 20 73 68 6f 75 6c |. Repor|ts shoul|
|00001b80| 64 20 62 65 20 63 6c 65 | 61 72 6c 79 20 69 6e 64 |d be cle|arly ind|
|00001b90| 69 63 61 74 65 64 20 74 | 6f 20 62 65 20 73 75 63 |icated t|o be suc|
|00001ba0| 68 20 62 79 20 67 69 76 | 69 6e 67 0d 0a 20 20 74 |h by giv|ing.. t|
|00001bb0| 68 65 6d 20 61 20 73 75 | 62 6a 65 63 74 20 6c 69 |hem a su|bject li|
|00001bc0| 6e 65 20 6f 66 20 74 68 | 65 20 66 6f 72 6d 0d 0a |ne of th|e form..|
|00001bd0| 20 20 20 20 22 52 65 70 | 6f 72 74 3a 20 74 68 69 | "Rep|ort: thi|
|00001be0| 73 2d 61 6e 64 2d 74 68 | 61 74 22 0d 0a 20 20 0d |s-and-th|at".. .|
|00001bf0| 0a 37 2e 20 44 69 73 63 | 75 73 73 69 6f 6e 73 0d |.7. Disc|ussions.|
|00001c00| 0a 0d 0a 20 20 41 6e 20 | 65 73 70 65 63 69 61 6c |... An |especial|
|00001c10| 6c 79 20 76 61 6c 75 61 | 62 6c 65 20 70 6f 73 73 |ly valua|ble poss|
|00001c20| 69 62 69 6c 69 74 79 20 | 6f 66 20 55 73 65 6e 65 |ibility |of Usene|
|00001c30| 74 20 69 73 20 6f 66 20 | 63 6f 75 72 73 65 20 74 |t is of |course t|
|00001c40| 68 61 74 20 6f 66 0d 0a | 20 20 64 69 73 63 75 73 |hat of..| discus|
|00001c50| 73 69 6e 67 20 61 20 63 | 65 72 74 61 69 6e 20 74 |sing a c|ertain t|
|00001c60| 6f 70 69 63 20 77 69 74 | 68 20 68 75 6e 64 72 65 |opic wit|h hundre|
|00001c70| 64 73 20 6f 66 20 70 6f | 74 65 6e 74 69 61 6c 20 |ds of po|tential |
|00001c80| 70 61 72 74 69 63 69 70 | 61 6e 74 73 2e 0d 0a 20 |particip|ants... |
|00001c90| 20 41 6c 6c 20 74 72 61 | 66 66 69 63 20 69 6e 20 | All tra|ffic in |
|00001ca0| 74 68 65 20 6e 65 77 73 | 67 72 6f 75 70 20 74 68 |the news|group th|
|00001cb0| 61 74 20 63 61 6e 20 6e | 6f 74 20 62 65 20 73 75 |at can n|ot be su|
|00001cc0| 62 73 75 6d 65 64 20 75 | 6e 64 65 72 20 6f 6e 65 |bsumed u|nder one|
|00001cd0| 20 6f 66 0d 0a 20 20 74 | 68 65 20 61 62 6f 76 65 | of.. t|he above|
|00001ce0| 20 63 61 74 65 67 6f 72 | 69 65 73 20 73 68 6f 75 | categor|ies shou|
|00001cf0| 6c 64 20 62 65 6c 6f 6e | 67 20 74 6f 20 61 20 64 |ld belon|g to a d|
|00001d00| 69 73 63 75 73 73 69 6f | 6e 2e 0d 0a 0d 0a 20 20 |iscussio|n..... |
|00001d10| 49 66 20 73 6f 6d 65 62 | 6f 64 79 20 65 78 70 6c |If someb|ody expl|
|00001d20| 69 63 69 74 6c 79 20 77 | 61 6e 74 73 20 74 6f 20 |icitly w|ants to |
|00001d30| 73 74 61 72 74 20 61 20 | 64 69 73 63 75 73 73 69 |start a |discussi|
|00001d40| 6f 6e 2c 20 68 65 2f 73 | 68 65 20 63 61 6e 20 64 |on, he/s|he can d|
|00001d50| 6f 20 73 6f 0d 0a 20 20 | 62 79 20 67 69 76 69 6e |o so.. |by givin|
|00001d60| 67 20 74 68 65 20 70 6f | 73 74 69 6e 67 20 61 20 |g the po|sting a |
|00001d70| 73 75 62 6a 65 63 74 20 | 6c 69 6e 65 20 6f 66 20 |subject |line of |
|00001d80| 74 68 65 20 66 6f 72 6d | 0d 0a 20 20 20 20 22 53 |the form|.. "S|
|00001d90| 74 61 72 74 20 64 69 73 | 63 75 73 73 69 6f 6e 3a |tart dis|cussion:|
|00001da0| 20 74 68 69 73 2d 61 6e | 64 2d 74 68 61 74 22 0d | this-an|d-that".|
|00001db0| 0a 20 20 28 50 65 6f 70 | 6c 65 20 77 68 6f 20 72 |. (Peop|le who r|
|00001dc0| 65 61 63 74 20 6f 6e 20 | 74 68 69 73 2c 20 70 6c |eact on |this, pl|
|00001dd0| 65 61 73 65 20 72 65 6d | 6f 76 65 20 74 68 65 0d |ease rem|ove the.|
|00001de0| 0a 20 20 20 22 53 74 61 | 72 74 20 64 69 73 63 75 |. "Sta|rt discu|
|00001df0| 73 73 69 6f 6e 3a 20 22 | 20 6c 61 62 65 6c 20 66 |ssion: "| label f|
|00001e00| 72 6f 6d 20 74 68 65 20 | 73 75 62 6a 65 63 74 20 |rom the |subject |
|00001e10| 6c 69 6e 65 20 6f 66 20 | 79 6f 75 72 20 72 65 70 |line of |your rep|
|00001e20| 6c 69 65 73 29 0d 0a 0d | 0a 20 20 49 74 20 69 73 |lies)...|. It is|
|00001e30| 20 71 75 69 74 65 20 64 | 69 66 66 69 63 75 6c 74 | quite d|ifficult|
|00001e40| 20 74 6f 20 6b 65 65 70 | 20 61 20 64 69 73 63 75 | to keep| a discu|
|00001e50| 73 73 69 6f 6e 20 66 72 | 6f 6d 20 64 72 69 66 74 |ssion fr|om drift|
|00001e60| 69 6e 67 20 69 6e 74 6f | 20 63 68 61 6f 73 2c 0d |ing into| chaos,.|
|00001e70| 0a 20 20 62 75 74 2c 20 | 75 6e 66 6f 72 74 75 6e |. but, |unfortun|
|00001e80| 61 74 65 6c 79 2c 20 61 | 73 20 6d 61 6e 79 20 6d |ately, a|s many m|
|00001e90| 61 6e 79 20 6f 74 68 65 | 72 20 6e 65 77 73 67 72 |any othe|r newsgr|
|00001ea0| 6f 75 70 73 20 73 68 6f | 77 20 74 68 65 72 65 20 |oups sho|w there |
|00001eb0| 73 65 65 6d 73 0d 0a 20 | 20 74 6f 20 62 65 20 6e |seems.. | to be n|
|00001ec0| 6f 20 73 65 63 75 72 65 | 20 77 61 79 20 74 6f 20 |o secure| way to |
|00001ed0| 61 76 6f 69 64 20 74 68 | 69 73 2e 0d 0a 20 20 4f |avoid th|is... O|
|00001ee0| 6e 20 74 68 65 20 6f 74 | 68 65 72 20 68 61 6e 64 |n the ot|her hand|
|00001ef0| 2c 20 63 6f 6d 70 2e 61 | 69 2e 6e 65 75 72 61 6c |, comp.a|i.neural|
|00001f00| 2d 6e 65 74 73 20 68 61 | 73 20 6e 6f 74 20 68 61 |-nets ha|s not ha|
|00001f10| 64 20 6d 61 6e 79 20 70 | 72 6f 62 6c 65 6d 73 0d |d many p|roblems.|
|00001f20| 0a 20 20 77 69 74 68 20 | 74 68 69 73 20 65 66 66 |. with |this eff|
|00001f30| 65 63 74 20 69 6e 20 74 | 68 65 20 70 61 73 74 2c |ect in t|he past,|
|00001f40| 20 73 6f 20 6c 65 74 27 | 73 20 6a 75 73 74 20 67 | so let'|s just g|
|00001f50| 6f 20 61 6e 64 20 68 6f | 70 65 2e 2e 2e 20 20 20 |o and ho|pe... |
|00001f60| 3a 2d 3e 0d 0a 0d 0a 2d | 2d 2d 2d 2d 2d 2d 2d 2d |:->....-|--------|
|00001f70| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00001f80| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00001f90| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00001fa0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 0d |--------|-------.|
|00001fb0| 0a 0d 0a 2d 41 32 2e 29 | 20 20 57 68 61 74 20 69 |...-A2.)| What i|
|00001fc0| 73 20 61 20 6e 65 75 72 | 61 6c 20 6e 65 74 77 6f |s a neur|al netwo|
|00001fd0| 72 6b 20 28 4e 4e 29 20 | 3f 0d 0a 0d 0a 20 20 5b |rk (NN) |?.... [|
|00001fe0| 61 6e 79 62 6f 64 79 20 | 74 68 65 72 65 20 74 6f |anybody |there to|
|00001ff0| 20 77 72 69 74 65 20 73 | 6f 6d 65 74 68 69 6e 67 | write s|omething|
|00002000| 20 62 65 74 74 65 72 3f | 0d 0a 20 20 20 62 75 7a | better?|.. buz|
|00002010| 7a 77 6f 72 64 73 3a 20 | 61 72 74 69 66 69 63 69 |zwords: |artifici|
|00002020| 61 6c 20 76 73 2e 20 6e | 61 74 75 72 61 6c 2f 62 |al vs. n|atural/b|
|00002030| 69 6f 6c 6f 67 69 63 61 | 6c 3b 20 75 6e 69 74 73 |iologica|l; units|
|00002040| 20 61 6e 64 0d 0a 20 20 | 20 63 6f 6e 6e 65 63 74 | and.. | connect|
|00002050| 69 6f 6e 73 3b 20 76 61 | 6c 75 65 20 70 61 73 73 |ions; va|lue pass|
|00002060| 69 6e 67 3b 20 69 6e 70 | 75 74 73 20 61 6e 64 20 |ing; inp|uts and |
|00002070| 6f 75 74 70 75 74 73 3b | 20 73 74 6f 72 61 67 65 |outputs;| storage|
|00002080| 20 69 6e 20 73 74 72 75 | 63 74 75 72 65 0d 0a 20 | in stru|cture.. |
|00002090| 20 20 61 6e 64 20 77 65 | 69 67 68 74 73 3b 20 6f | and we|ights; o|
|000020a0| 6e 6c 79 20 6c 6f 63 61 | 6c 20 69 6e 66 6f 72 6d |nly loca|l inform|
|000020b0| 61 74 69 6f 6e 3b 20 68 | 69 67 68 6c 79 20 70 61 |ation; h|ighly pa|
|000020c0| 72 61 6c 6c 65 6c 20 6f | 70 65 72 61 74 69 6f 6e |rallel o|peration|
|000020d0| 20 5d 0d 0a 0d 0a 46 69 | 72 73 74 20 6f 66 20 61 | ]....Fi|rst of a|
|000020e0| 6c 6c 2c 20 77 68 65 6e | 20 77 65 20 61 72 65 20 |ll, when| we are |
|000020f0| 74 61 6c 6b 69 6e 67 20 | 61 62 6f 75 74 20 61 20 |talking |about a |
|00002100| 6e 65 75 72 61 6c 20 6e | 65 74 77 6f 72 6b 2c 20 |neural n|etwork, |
|00002110| 77 65 20 2a 73 68 6f 75 | 6c 64 2a 0d 0a 75 73 75 |we *shou|ld*..usu|
|00002120| 61 6c 6c 79 20 62 65 74 | 74 65 72 20 73 61 79 20 |ally bet|ter say |
|00002130| 22 61 72 74 69 66 69 63 | 69 61 6c 20 6e 65 75 72 |"artific|ial neur|
|00002140| 61 6c 20 6e 65 74 77 6f | 72 6b 22 20 28 41 4e 4e |al netwo|rk" (ANN|
|00002150| 29 2c 20 62 65 63 61 75 | 73 65 20 74 68 61 74 20 |), becau|se that |
|00002160| 69 73 0d 0a 77 68 61 74 | 20 77 65 20 6d 65 61 6e |is..what| we mean|
|00002170| 20 20 6d 6f 73 74 20 6f | 66 20 74 68 65 20 74 69 | most o|f the ti|
|00002180| 6d 65 2e 20 42 69 6f 6c | 6f 67 69 63 61 6c 20 6e |me. Biol|ogical n|
|00002190| 65 75 72 61 6c 20 6e 65 | 74 77 6f 72 6b 73 20 61 |eural ne|tworks a|
|000021a0| 72 65 20 6d 75 63 68 0d | 0a 6d 6f 72 65 20 63 6f |re much.|.more co|
|000021b0| 6d 70 6c 69 63 61 74 65 | 64 20 69 6e 20 74 68 65 |mplicate|d in the|
|000021c0| 69 72 20 65 6c 65 6d 65 | 6e 74 61 72 79 20 73 74 |ir eleme|ntary st|
|000021d0| 72 75 63 74 75 72 65 73 | 20 74 68 61 6e 20 74 68 |ructures| than th|
|000021e0| 65 20 6d 61 74 68 65 6d | 61 74 69 63 61 6c 0d 0a |e mathem|atical..|
|000021f0| 6d 6f 64 65 6c 73 20 77 | 65 20 75 73 65 20 66 6f |models w|e use fo|
|00002200| 72 20 41 4e 4e 73 2e 0d | 0a 0d 0a 41 20 76 61 67 |r ANNs..|...A vag|
|00002210| 75 65 20 64 65 73 63 72 | 69 70 74 69 6f 6e 20 69 |ue descr|iption i|
|00002220| 73 20 61 73 20 66 6f 6c | 6c 6f 77 73 3a 0d 0a 0d |s as fol|lows:...|
|00002230| 0a 41 6e 20 41 4e 4e 20 | 69 73 20 61 20 6e 65 74 |.An ANN |is a net|
|00002240| 77 6f 72 6b 20 6f 66 20 | 6d 61 6e 79 20 76 65 72 |work of |many ver|
|00002250| 79 20 73 69 6d 70 6c 65 | 20 70 72 6f 63 65 73 73 |y simple| process|
|00002260| 6f 72 73 20 28 22 75 6e | 69 74 73 22 29 2c 20 65 |ors ("un|its"), e|
|00002270| 61 63 68 0d 0a 70 6f 73 | 73 69 62 6c 79 20 68 61 |ach..pos|sibly ha|
|00002280| 76 69 6e 67 20 61 20 28 | 73 6d 61 6c 6c 20 61 6d |ving a (|small am|
|00002290| 6f 75 6e 74 20 6f 66 29 | 20 6c 6f 63 61 6c 20 6d |ount of)| local m|
|000022a0| 65 6d 6f 72 79 2e 20 54 | 68 65 20 75 6e 69 74 73 |emory. T|he units|
|000022b0| 20 61 72 65 0d 0a 63 6f | 6e 6e 65 63 74 65 64 20 | are..co|nnected |
|000022c0| 62 79 20 75 6e 69 64 69 | 72 65 63 74 69 6f 6e 61 |by unidi|rectiona|
|000022d0| 6c 20 63 6f 6d 6d 75 6e | 69 63 61 74 69 6f 6e 20 |l commun|ication |
|000022e0| 63 68 61 6e 6e 65 6c 73 | 20 28 22 63 6f 6e 6e 65 |channels| ("conne|
|000022f0| 63 74 69 6f 6e 73 22 29 | 2c 0d 0a 77 68 69 63 68 |ctions")|,..which|
|00002300| 20 63 61 72 72 79 20 6e | 75 6d 65 72 69 63 20 28 | carry n|umeric (|
|00002310| 61 73 20 6f 70 70 6f 73 | 65 64 20 74 6f 20 73 79 |as oppos|ed to sy|
|00002320| 6d 62 6f 6c 69 63 29 20 | 64 61 74 61 2e 20 20 54 |mbolic) |data. T|
|00002330| 68 65 20 75 6e 69 74 73 | 20 6f 70 65 72 61 74 65 |he units| operate|
|00002340| 0d 0a 6f 6e 6c 79 20 6f | 6e 20 74 68 65 69 72 20 |..only o|n their |
|00002350| 6c 6f 63 61 6c 20 64 61 | 74 61 20 61 6e 64 20 6f |local da|ta and o|
|00002360| 6e 20 74 68 65 20 69 6e | 70 75 74 73 20 74 68 65 |n the in|puts the|
|00002370| 79 20 72 65 63 65 69 76 | 65 20 76 69 61 20 74 68 |y receiv|e via th|
|00002380| 65 0d 0a 63 6f 6e 6e 65 | 63 74 69 6f 6e 73 2e 0d |e..conne|ctions..|
|00002390| 0a 0d 0a 54 68 65 20 64 | 65 73 69 67 6e 20 6d 6f |...The d|esign mo|
|000023a0| 74 69 76 61 74 69 6f 6e | 20 69 73 20 77 68 61 74 |tivation| is what|
|000023b0| 20 64 69 73 74 69 6e 67 | 75 69 73 68 65 73 20 6e | disting|uishes n|
|000023c0| 65 75 72 61 6c 20 6e 65 | 74 77 6f 72 6b 73 20 66 |eural ne|tworks f|
|000023d0| 72 6f 6d 20 6f 74 68 65 | 72 0d 0a 6d 61 74 68 65 |rom othe|r..mathe|
|000023e0| 6d 61 74 69 63 61 6c 20 | 74 65 63 68 6e 69 71 75 |matical |techniqu|
|000023f0| 65 73 3a 0d 0a 0d 0a 41 | 20 6e 65 75 72 61 6c 20 |es:....A| neural |
|00002400| 6e 65 74 77 6f 72 6b 20 | 69 73 20 61 20 70 72 6f |network |is a pro|
|00002410| 63 65 73 73 69 6e 67 20 | 64 65 76 69 63 65 2c 20 |cessing |device, |
|00002420| 65 69 74 68 65 72 20 61 | 6e 20 61 6c 67 6f 72 69 |either a|n algori|
|00002430| 74 68 6d 2c 20 6f 72 20 | 61 63 74 75 61 6c 0d 0a |thm, or |actual..|
|00002440| 68 61 72 64 77 61 72 65 | 2c 20 77 68 6f 73 65 20 |hardware|, whose |
|00002450| 64 65 73 69 67 6e 20 77 | 61 73 20 6d 6f 74 69 76 |design w|as motiv|
|00002460| 61 74 65 64 20 62 79 20 | 74 68 65 20 64 65 73 69 |ated by |the desi|
|00002470| 67 6e 20 61 6e 64 20 66 | 75 6e 63 74 69 6f 6e 69 |gn and f|unctioni|
|00002480| 6e 67 20 6f 66 20 68 75 | 6d 61 6e 0d 0a 62 72 61 |ng of hu|man..bra|
|00002490| 69 6e 73 20 61 6e 64 20 | 63 6f 6d 70 6f 6e 65 6e |ins and |componen|
|000024a0| 74 73 20 74 68 65 72 65 | 6f 66 2e 0d 0a 0d 0a 4d |ts there|of.....M|
|000024b0| 6f 73 74 20 6e 65 75 72 | 61 6c 20 6e 65 74 77 6f |ost neur|al netwo|
|000024c0| 72 6b 73 20 68 61 76 65 | 20 73 6f 6d 65 20 73 6f |rks have| some so|
|000024d0| 72 74 20 6f 66 20 22 74 | 72 61 69 6e 69 6e 67 22 |rt of "t|raining"|
|000024e0| 20 72 75 6c 65 0d 0a 77 | 68 65 72 65 62 79 20 74 | rule..w|hereby t|
|000024f0| 68 65 20 77 65 69 67 68 | 74 73 20 6f 66 20 63 6f |he weigh|ts of co|
|00002500| 6e 6e 65 63 74 69 6f 6e | 73 20 61 72 65 20 61 64 |nnection|s are ad|
|00002510| 6a 75 73 74 65 64 20 6f | 6e 20 74 68 65 20 62 61 |justed o|n the ba|
|00002520| 73 69 73 20 6f 66 0d 0a | 70 72 65 73 65 6e 74 65 |sis of..|presente|
|00002530| 64 20 70 61 74 74 65 72 | 6e 73 2e 0d 0a 49 6e 20 |d patter|ns...In |
|00002540| 6f 74 68 65 72 20 77 6f | 72 64 73 2c 20 6e 65 75 |other wo|rds, neu|
|00002550| 72 61 6c 20 6e 65 74 77 | 6f 72 6b 73 20 22 6c 65 |ral netw|orks "le|
|00002560| 61 72 6e 22 20 66 72 6f | 6d 20 65 78 61 6d 70 6c |arn" fro|m exampl|
|00002570| 65 73 2c 0d 0a 6a 75 73 | 74 20 6c 69 6b 65 20 63 |es,..jus|t like c|
|00002580| 68 69 6c 64 72 65 6e 20 | 6c 65 61 72 6e 20 74 6f |hildren |learn to|
|00002590| 20 72 65 63 6f 67 6e 69 | 7a 65 20 64 6f 67 73 20 | recogni|ze dogs |
|000025a0| 66 72 6f 6d 20 65 78 61 | 6d 70 6c 65 73 20 6f 66 |from exa|mples of|
|000025b0| 20 64 6f 67 73 2c 0d 0a | 61 6e 64 20 65 78 68 69 | dogs,..|and exhi|
|000025c0| 62 69 74 20 73 6f 6d 65 | 20 73 74 72 75 63 74 75 |bit some| structu|
|000025d0| 72 61 6c 20 63 61 70 61 | 62 69 6c 69 74 79 20 66 |ral capa|bility f|
|000025e0| 6f 72 20 67 65 6e 65 72 | 61 6c 69 7a 61 74 69 6f |or gener|alizatio|
|000025f0| 6e 2e 0d 0a 0d 0a 4e 65 | 75 72 61 6c 20 6e 65 74 |n.....Ne|ural net|
|00002600| 77 6f 72 6b 73 20 6e 6f | 72 6d 61 6c 6c 79 20 68 |works no|rmally h|
|00002610| 61 76 65 20 67 72 65 61 | 74 20 70 6f 74 65 6e 74 |ave grea|t potent|
|00002620| 69 61 6c 20 66 6f 72 20 | 70 61 72 61 6c 6c 65 6c |ial for |parallel|
|00002630| 69 73 6d 2c 20 73 69 6e | 63 65 0d 0a 74 68 65 20 |ism, sin|ce..the |
|00002640| 63 6f 6d 70 75 74 61 74 | 69 6f 6e 73 20 6f 66 20 |computat|ions of |
|00002650| 74 68 65 20 63 6f 6d 70 | 6f 6e 65 6e 74 73 20 61 |the comp|onents a|
|00002660| 72 65 20 69 6e 64 65 70 | 65 6e 64 65 6e 74 20 6f |re indep|endent o|
|00002670| 66 20 65 61 63 68 20 6f | 74 68 65 72 2e 0d 0a 0d |f each o|ther....|
|00002680| 0a 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |.-------|--------|
|00002690| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|000026a0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|000026b0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|000026c0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 0d 0a 0d 0a 2d 41 33 |--------|-....-A3|
|000026d0| 2e 29 20 20 57 68 61 74 | 20 63 61 6e 20 79 6f 75 |.) What| can you|
|000026e0| 20 64 6f 20 77 69 74 68 | 20 61 20 4e 65 75 72 61 | do with| a Neura|
|000026f0| 6c 20 4e 65 74 77 6f 72 | 6b 20 61 6e 64 20 77 68 |l Networ|k and wh|
|00002700| 61 74 20 6e 6f 74 20 3f | 0d 0a 0d 0a 20 20 5b 70 |at not ?|.... [p|
|00002710| 72 65 6c 69 6d 69 6e 61 | 72 79 5d 0d 0a 20 20 0d |relimina|ry].. .|
|00002720| 0a 49 6e 20 70 72 69 6e | 63 69 70 6c 65 2c 20 4e |.In prin|ciple, N|
|00002730| 4e 73 20 63 61 6e 20 63 | 6f 6d 70 75 74 65 20 61 |Ns can c|ompute a|
|00002740| 6e 79 20 63 6f 6d 70 75 | 74 61 62 6c 65 20 66 75 |ny compu|table fu|
|00002750| 6e 63 74 69 6f 6e 2c 20 | 69 2e 65 2e 20 74 68 65 |nction, |i.e. the|
|00002760| 79 20 63 61 6e 0d 0a 64 | 6f 20 65 76 65 72 79 74 |y can..d|o everyt|
|00002770| 68 69 6e 67 20 61 20 6e | 6f 72 6d 61 6c 20 64 69 |hing a n|ormal di|
|00002780| 67 69 74 61 6c 20 63 6f | 6d 70 75 74 65 72 20 63 |gital co|mputer c|
|00002790| 61 6e 20 64 6f 2e 0d 0a | 45 73 70 65 63 69 61 6c |an do...|Especial|
|000027a0| 6c 79 20 63 61 6e 20 61 | 6e 79 74 68 69 6e 67 20 |ly can a|nything |
|000027b0| 74 68 61 74 20 63 61 6e | 20 62 65 20 72 65 70 72 |that can| be repr|
|000027c0| 65 73 65 6e 74 65 64 20 | 61 73 20 61 20 6d 61 70 |esented |as a map|
|000027d0| 70 69 6e 67 20 62 65 74 | 77 65 65 6e 0d 0a 76 65 |ping bet|ween..ve|
|000027e0| 63 74 6f 72 20 73 70 61 | 63 65 73 20 62 65 20 61 |ctor spa|ces be a|
|000027f0| 70 70 72 6f 78 69 6d 61 | 74 65 64 20 74 6f 20 61 |pproxima|ted to a|
|00002800| 72 62 69 74 72 61 72 79 | 20 70 72 65 63 69 73 69 |rbitrary| precisi|
|00002810| 6f 6e 20 62 79 20 66 65 | 65 64 66 6f 72 77 61 72 |on by fe|edforwar|
|00002820| 64 0d 0a 4e 4e 73 20 28 | 77 68 69 63 68 20 69 73 |d..NNs (|which is|
|00002830| 20 74 68 65 20 6d 6f 73 | 74 20 6f 66 74 65 6e 20 | the mos|t often |
|00002840| 75 73 65 64 20 74 79 70 | 65 29 2e 0d 0a 0d 0a 49 |used typ|e).....I|
|00002850| 6e 20 70 72 61 63 74 69 | 63 65 2c 20 4e 4e 73 20 |n practi|ce, NNs |
|00002860| 61 72 65 20 65 73 70 65 | 63 69 61 6c 6c 79 20 75 |are espe|cially u|
|00002870| 73 65 66 75 6c 20 66 6f | 72 20 6d 61 70 70 69 6e |seful fo|r mappin|
|00002880| 67 20 70 72 6f 62 6c 65 | 6d 73 0d 0a 77 68 69 63 |g proble|ms..whic|
|00002890| 68 20 61 72 65 20 74 6f | 6c 65 72 61 6e 74 20 6f |h are to|lerant o|
|000028a0| 66 20 61 20 68 69 67 68 | 20 65 72 72 6f 72 20 72 |f a high| error r|
|000028b0| 61 74 65 2c 20 68 61 76 | 65 20 6c 6f 74 73 20 6f |ate, hav|e lots o|
|000028c0| 66 20 65 78 61 6d 70 6c | 65 20 64 61 74 61 0d 0a |f exampl|e data..|
|000028d0| 61 76 61 69 6c 61 62 6c | 65 2c 20 62 75 74 20 74 |availabl|e, but t|
|000028e0| 6f 20 77 68 69 63 68 20 | 68 61 72 64 20 61 6e 64 |o which |hard and|
|000028f0| 20 66 61 73 74 20 72 75 | 6c 65 73 20 63 61 6e 20 | fast ru|les can |
|00002900| 6e 6f 74 20 65 61 73 69 | 6c 79 20 62 65 20 61 70 |not easi|ly be ap|
|00002910| 70 6c 69 65 64 2e 0d 0a | 0d 0a 4e 4e 73 20 61 72 |plied...|..NNs ar|
|00002920| 65 20 65 73 70 65 63 69 | 61 6c 6c 79 20 62 61 64 |e especi|ally bad|
|00002930| 20 66 6f 72 20 70 72 6f | 62 6c 65 6d 73 20 74 68 | for pro|blems th|
|00002940| 61 74 20 61 72 65 20 63 | 6f 6e 63 65 72 6e 65 64 |at are c|oncerned|
|00002950| 20 77 69 74 68 20 6d 61 | 6e 69 70 75 6c 61 74 69 | with ma|nipulati|
|00002960| 6f 6e 20 0d 0a 6f 66 20 | 73 79 6d 62 6f 6c 73 20 |on ..of |symbols |
|00002970| 61 6e 64 20 66 6f 72 20 | 70 72 6f 62 6c 65 6d 73 |and for |problems|
|00002980| 20 74 68 61 74 20 6e 65 | 65 64 20 73 68 6f 72 74 | that ne|ed short|
|00002990| 2d 74 65 72 6d 20 6d 65 | 6d 6f 72 79 2e 0d 0a 0d |-term me|mory....|
|000029a0| 0a 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |.-------|--------|
|000029b0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|000029c0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|000029d0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|000029e0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 0d 0a 0d 0a 2d 41 34 |--------|-....-A4|
|000029f0| 2e 29 20 20 57 68 6f 20 | 69 73 20 63 6f 6e 63 65 |.) Who |is conce|
|00002a00| 72 6e 65 64 20 77 69 74 | 68 20 4e 65 75 72 61 6c |rned wit|h Neural|
|00002a10| 20 4e 65 74 77 6f 72 6b | 73 20 3f 0d 0a 0d 0a 4e | Network|s ?....N|
|00002a20| 65 75 72 61 6c 20 4e 65 | 74 77 6f 72 6b 73 20 61 |eural Ne|tworks a|
|00002a30| 72 65 20 69 6e 74 65 72 | 65 73 74 69 6e 67 20 66 |re inter|esting f|
|00002a40| 6f 72 20 71 75 69 74 65 | 20 61 20 6c 6f 74 20 6f |or quite| a lot o|
|00002a50| 66 20 76 65 72 79 20 64 | 69 73 73 69 6d 69 6c 61 |f very d|issimila|
|00002a60| 72 20 70 65 6f 70 6c 65 | 3a 0d 0a 0d 0a 2d 20 43 |r people|:....- C|
|00002a70| 6f 6d 70 75 74 65 72 20 | 73 63 69 65 6e 74 69 73 |omputer |scientis|
|00002a80| 74 73 20 77 61 6e 74 20 | 74 6f 20 66 69 6e 64 20 |ts want |to find |
|00002a90| 6f 75 74 20 61 62 6f 75 | 74 20 74 68 65 20 70 72 |out abou|t the pr|
|00002aa0| 6f 70 65 72 74 69 65 73 | 20 6f 66 20 0d 0a 20 20 |operties| of .. |
|00002ab0| 6e 6f 6e 2d 73 79 6d 62 | 6f 6c 69 63 20 69 6e 66 |non-symb|olic inf|
|00002ac0| 6f 72 6d 61 74 69 6f 6e | 20 70 72 6f 63 65 73 73 |ormation| process|
|00002ad0| 69 6e 67 20 77 69 74 68 | 20 6e 65 75 72 61 6c 20 |ing with| neural |
|00002ae0| 6e 65 74 73 20 61 6e 64 | 20 61 62 6f 75 74 20 6c |nets and| about l|
|00002af0| 65 61 72 6e 69 6e 67 20 | 0d 0a 20 20 73 79 73 74 |earning |.. syst|
|00002b00| 65 6d 73 20 69 6e 20 67 | 65 6e 65 72 61 6c 2e 0d |ems in g|eneral..|
|00002b10| 0a 2d 20 45 6e 67 69 6e | 65 65 72 73 20 6f 66 20 |.- Engin|eers of |
|00002b20| 6d 61 6e 79 20 6b 69 6e | 64 73 20 77 61 6e 74 20 |many kin|ds want |
|00002b30| 74 6f 20 65 78 70 6c 6f | 69 74 20 74 68 65 20 63 |to explo|it the c|
|00002b40| 61 70 61 62 69 6c 69 74 | 69 65 73 20 6f 66 20 0d |apabilit|ies of .|
|00002b50| 0a 20 20 6e 65 75 72 61 | 6c 20 6e 65 74 77 6f 72 |. neura|l networ|
|00002b60| 6b 73 20 6f 6e 20 6d 61 | 6e 79 20 61 72 65 61 73 |ks on ma|ny areas|
|00002b70| 20 28 65 2e 67 2e 20 73 | 69 67 6e 61 6c 20 70 72 | (e.g. s|ignal pr|
|00002b80| 6f 63 65 73 73 69 6e 67 | 29 20 74 6f 20 73 6f 6c |ocessing|) to sol|
|00002b90| 76 65 20 0d 0a 20 20 74 | 68 65 69 72 20 61 70 70 |ve .. t|heir app|
|00002ba0| 6c 69 63 61 74 69 6f 6e | 20 70 72 6f 62 6c 65 6d |lication| problem|
|00002bb0| 73 2e 0d 0a 2d 20 43 6f | 67 6e 69 74 69 76 65 20 |s...- Co|gnitive |
|00002bc0| 73 63 69 65 6e 74 69 73 | 74 73 20 76 69 65 77 20 |scientis|ts view |
|00002bd0| 6e 65 75 72 61 6c 20 6e | 65 74 77 6f 72 6b 73 20 |neural n|etworks |
|00002be0| 61 73 20 61 20 70 6f 73 | 73 69 62 6c 65 20 61 70 |as a pos|sible ap|
|00002bf0| 70 61 72 61 74 75 73 20 | 74 6f 0d 0a 20 20 64 65 |paratus |to.. de|
|00002c00| 73 63 72 69 62 65 20 6d | 6f 64 65 6c 73 20 6f 66 |scribe m|odels of|
|00002c10| 20 74 68 69 6e 6b 69 6e | 67 20 61 6e 64 20 63 6f | thinkin|g and co|
|00002c20| 6e 73 63 69 65 6e 63 65 | 20 28 48 69 67 68 2d 6c |nscience| (High-l|
|00002c30| 65 76 65 6c 20 62 72 61 | 69 6e 20 66 75 6e 63 74 |evel bra|in funct|
|00002c40| 69 6f 6e 29 2e 0d 0a 2d | 20 4e 65 75 72 6f 2d 70 |ion)...-| Neuro-p|
|00002c50| 68 79 73 69 6f 6c 6f 67 | 69 73 74 73 20 75 73 65 |hysiolog|ists use|
|00002c60| 20 6e 65 75 72 61 6c 20 | 6e 65 74 77 6f 72 6b 73 | neural |networks|
|00002c70| 20 74 6f 20 64 65 73 63 | 72 69 62 65 20 61 6e 64 | to desc|ribe and|
|00002c80| 20 65 78 70 6c 6f 72 65 | 0d 0a 20 20 6d 65 64 69 | explore|.. medi|
|00002c90| 75 6d 2d 6c 65 76 65 6c | 20 62 72 61 69 6e 20 66 |um-level| brain f|
|00002ca0| 75 6e 63 74 69 6f 6e 20 | 28 65 2e 67 2e 20 6d 65 |unction |(e.g. me|
|00002cb0| 6d 6f 72 79 2c 20 73 65 | 6e 73 6f 72 79 20 73 79 |mory, se|nsory sy|
|00002cc0| 73 74 65 6d 2c 20 6d 6f | 74 6f 72 69 63 73 29 2e |stem, mo|torics).|
|00002cd0| 0d 0a 2d 20 50 68 79 73 | 69 63 69 73 74 73 20 75 |..- Phys|icists u|
|00002ce0| 73 65 20 6e 65 75 72 61 | 6c 20 6e 65 74 77 6f 72 |se neura|l networ|
|00002cf0| 6b 73 20 74 6f 20 6d 6f | 64 65 6c 20 70 68 65 6e |ks to mo|del phen|
|00002d00| 6f 6d 65 6e 61 20 69 6e | 20 73 74 61 74 69 73 74 |omena in| statist|
|00002d10| 69 63 61 6c 0d 0a 20 20 | 6d 65 63 68 61 6e 69 63 |ical.. |mechanic|
|00002d20| 73 20 61 6e 64 20 66 6f | 72 20 61 20 6c 6f 74 20 |s and fo|r a lot |
|00002d30| 6f 66 20 6f 74 68 65 72 | 20 74 61 73 6b 73 2e 0d |of other| tasks..|
|00002d40| 0a 2d 20 42 69 6f 6c 6f | 67 69 73 74 73 20 75 73 |.- Biolo|gists us|
|00002d50| 65 20 4e 65 75 72 61 6c | 20 4e 65 74 77 6f 72 6b |e Neural| Network|
|00002d60| 73 20 74 6f 20 69 6e 74 | 65 72 70 72 65 74 20 6e |s to int|erpret n|
|00002d70| 75 63 6c 65 6f 74 69 64 | 65 20 73 65 71 75 65 6e |ucleotid|e sequen|
|00002d80| 63 65 73 2e 0d 0a 2d 20 | 50 68 69 6c 6f 73 6f 70 |ces...- |Philosop|
|00002d90| 68 65 72 73 20 61 6e 64 | 20 73 6f 6d 65 20 6f 74 |hers and| some ot|
|00002da0| 68 65 72 20 70 65 6f 70 | 6c 65 20 6d 61 79 20 61 |her peop|le may a|
|00002db0| 6c 73 6f 20 62 65 20 69 | 6e 74 65 72 65 73 74 65 |lso be i|ntereste|
|00002dc0| 64 20 69 6e 20 0d 0a 20 | 20 4e 65 75 72 61 6c 20 |d in .. | Neural |
|00002dd0| 4e 65 74 77 6f 72 6b 73 | 20 66 6f 72 20 76 61 72 |Networks| for var|
|00002de0| 69 6f 75 73 20 72 65 61 | 73 6f 6e 73 2e 0d 0a 0d |ious rea|sons....|
|00002df0| 0a 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |.-------|--------|
|00002e00| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00002e10| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00002e20| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00002e30| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 0d 0a 0d 0a 2d 41 36 |--------|-....-A6|
|00002e40| 2e 29 20 20 57 68 61 74 | 20 64 6f 65 73 20 27 62 |.) What| does 'b|
|00002e50| 61 63 6b 70 72 6f 70 27 | 20 6d 65 61 6e 20 3f 0d |ackprop'| mean ?.|
|00002e60| 0a 0d 0a 5b 61 6e 79 62 | 6f 64 79 20 74 6f 20 77 |...[anyb|ody to w|
|00002e70| 72 69 74 65 20 73 6f 6d | 65 74 68 69 6e 67 20 73 |rite som|ething s|
|00002e80| 69 6d 69 6c 61 72 6c 79 | 20 73 68 6f 72 74 2c 0d |imilarly| short,.|
|00002e90| 0a 20 62 75 74 20 65 61 | 73 69 65 72 20 74 6f 20 |. but ea|sier to |
|00002ea0| 75 6e 64 65 72 73 74 61 | 6e 64 20 66 6f 72 20 61 |understa|nd for a|
|00002eb0| 20 62 65 67 69 6e 6e 65 | 72 20 3f 20 5d 0d 0a 0d | beginne|r ? ]...|
|00002ec0| 0a 49 74 20 69 73 20 61 | 6e 20 61 62 62 72 65 76 |.It is a|n abbrev|
|00002ed0| 69 61 74 69 6f 6e 20 66 | 6f 72 20 27 62 61 63 6b |iation f|or 'back|
|00002ee0| 70 72 6f 70 61 67 61 74 | 69 6f 6e 20 6f 66 20 65 |propagat|ion of e|
|00002ef0| 72 72 6f 72 27 20 77 68 | 69 63 68 20 69 73 20 74 |rror' wh|ich is t|
|00002f00| 68 65 0d 0a 6d 6f 73 74 | 20 77 69 64 65 6c 79 20 |he..most| widely |
|00002f10| 75 73 65 64 20 6c 65 61 | 72 6e 69 6e 67 20 6d 65 |used lea|rning me|
|00002f20| 74 68 6f 64 20 66 6f 72 | 20 6e 65 75 72 61 6c 20 |thod for| neural |
|00002f30| 6e 65 74 77 6f 72 6b 73 | 20 74 6f 64 61 79 2e 0d |networks| today..|
|00002f40| 0a 41 6c 74 68 6f 75 67 | 68 20 69 74 20 68 61 73 |.Althoug|h it has|
|00002f50| 20 6d 61 6e 79 20 64 69 | 73 61 64 76 61 6e 74 61 | many di|sadvanta|
|00002f60| 67 65 73 2c 20 77 68 69 | 63 68 20 63 6f 75 6c 64 |ges, whi|ch could|
|00002f70| 20 62 65 20 73 75 6d 6d | 61 72 69 7a 65 64 20 69 | be summ|arized i|
|00002f80| 6e 20 74 68 65 0d 0a 73 | 65 6e 74 65 6e 63 65 0d |n the..s|entence.|
|00002f90| 0a 20 20 22 59 6f 75 20 | 61 72 65 20 61 6c 6d 6f |. "You |are almo|
|00002fa0| 73 74 20 6e 6f 74 20 6b | 6e 6f 77 69 6e 67 20 77 |st not k|nowing w|
|00002fb0| 68 61 74 20 79 6f 75 20 | 61 72 65 20 61 63 74 75 |hat you |are actu|
|00002fc0| 61 6c 6c 79 20 64 6f 69 | 6e 67 0d 0a 20 20 20 77 |ally doi|ng.. w|
|00002fd0| 68 65 6e 20 75 73 69 6e | 67 20 62 61 63 6b 70 72 |hen usin|g backpr|
|00002fe0| 6f 70 61 67 61 74 69 6f | 6e 22 20 20 3a 2d 29 0d |opagatio|n" :-).|
|00002ff0| 0a 69 74 20 68 61 73 20 | 70 72 65 74 74 79 20 6d |.it has |pretty m|
|00003000| 75 63 68 20 73 75 63 63 | 65 73 73 20 6f 6e 20 70 |uch succ|ess on p|
|00003010| 72 61 63 74 69 63 61 6c | 20 61 70 70 6c 69 63 61 |ractical| applica|
|00003020| 74 69 6f 6e 73 20 61 6e | 64 20 69 73 0d 0a 72 65 |tions an|d is..re|
|00003030| 6c 61 74 69 76 65 6c 79 | 20 65 61 73 79 20 74 6f |latively| easy to|
|00003040| 20 61 70 70 6c 79 2e 0d | 0a 0d 0a 49 74 20 69 73 | apply..|...It is|
|00003050| 20 66 6f 72 20 74 68 65 | 20 74 72 61 69 6e 69 6e | for the| trainin|
|00003060| 67 20 6f 66 20 6c 61 79 | 65 72 65 64 20 28 69 2e |g of lay|ered (i.|
|00003070| 65 2e 2c 20 6e 6f 64 65 | 73 20 61 72 65 20 67 72 |e., node|s are gr|
|00003080| 6f 75 70 65 64 0d 0a 69 | 6e 20 6c 61 79 65 72 73 |ouped..i|n layers|
|00003090| 29 20 66 65 65 64 66 6f | 72 77 61 72 64 20 28 69 |) feedfo|rward (i|
|000030a0| 2e 65 2e 2c 20 74 68 65 | 20 61 72 63 73 20 6a 6f |.e., the| arcs jo|
|000030b0| 69 6e 69 6e 67 20 6e 6f | 64 65 73 20 61 72 65 0d |ining no|des are.|
|000030c0| 0a 75 6e 69 64 69 72 65 | 63 74 69 6f 6e 61 6c 2c |.unidire|ctional,|
|000030d0| 20 61 6e 64 20 74 68 65 | 72 65 20 61 72 65 20 6e | and the|re are n|
|000030e0| 6f 20 63 79 63 6c 65 73 | 29 20 6e 65 74 73 2e 0d |o cycles|) nets..|
|000030f0| 0a 0d 0a 42 61 63 6b 2d | 70 72 6f 70 61 67 61 74 |...Back-|propagat|
|00003100| 69 6f 6e 20 6e 65 65 64 | 73 20 61 20 74 65 61 63 |ion need|s a teac|
|00003110| 68 65 72 20 74 68 61 74 | 20 6b 6e 6f 77 73 20 74 |her that| knows t|
|00003120| 68 65 20 63 6f 72 72 65 | 63 74 20 6f 75 74 70 75 |he corre|ct outpu|
|00003130| 74 20 66 6f 72 20 61 6e | 79 0d 0a 69 6e 70 75 74 |t for an|y..input|
|00003140| 20 28 22 73 75 70 65 72 | 76 69 73 65 64 20 6c 65 | ("super|vised le|
|00003150| 61 72 6e 69 6e 67 22 29 | 20 61 6e 64 20 75 73 65 |arning")| and use|
|00003160| 73 20 67 72 61 64 69 65 | 6e 74 20 64 65 73 63 65 |s gradie|nt desce|
|00003170| 6e 74 20 6f 6e 20 74 68 | 65 20 65 72 72 6f 72 0d |nt on th|e error.|
|00003180| 0a 28 61 73 20 70 72 6f | 76 69 64 65 64 20 62 79 |.(as pro|vided by|
|00003190| 20 74 68 65 20 74 65 61 | 63 68 65 72 29 20 74 6f | the tea|cher) to|
|000031a0| 20 74 72 61 69 6e 20 74 | 68 65 20 77 65 69 67 68 | train t|he weigh|
|000031b0| 74 73 2e 20 20 54 68 65 | 20 61 63 74 69 76 61 74 |ts. The| activat|
|000031c0| 69 6f 6e 0d 0a 66 75 6e | 63 74 69 6f 6e 20 69 73 |ion..fun|ction is|
|000031d0| 20 28 75 73 75 61 6c 6c | 79 29 20 61 20 73 69 67 | (usuall|y) a sig|
|000031e0| 6d 6f 69 64 61 6c 20 28 | 69 2e 65 2e 2c 20 62 6f |moidal (|i.e., bo|
|000031f0| 75 6e 64 65 64 20 61 62 | 6f 76 65 20 61 6e 64 20 |unded ab|ove and |
|00003200| 62 65 6c 6f 77 2c 20 62 | 75 74 0d 0a 64 69 66 66 |below, b|ut..diff|
|00003210| 65 72 65 6e 74 69 61 62 | 6c 65 29 20 66 75 6e 63 |erentiab|le) func|
|00003220| 74 69 6f 6e 20 6f 66 20 | 61 20 77 65 69 67 68 74 |tion of |a weight|
|00003230| 65 64 20 73 75 6d 20 6f | 66 20 74 68 65 20 6e 6f |ed sum o|f the no|
|00003240| 64 65 73 20 69 6e 70 75 | 74 73 2e 0d 0a 0d 0a 54 |des inpu|ts.....T|
|00003250| 68 65 20 75 73 65 20 6f | 66 20 61 20 67 72 61 64 |he use o|f a grad|
|00003260| 69 65 6e 74 20 64 65 73 | 63 65 6e 74 20 61 6c 67 |ient des|cent alg|
|00003270| 6f 72 69 74 68 6d 20 74 | 6f 20 74 72 61 69 6e 20 |orithm t|o train |
|00003280| 69 74 73 20 77 65 69 67 | 68 74 73 20 6d 61 6b 65 |its weig|hts make|
|00003290| 73 20 69 74 0d 0a 73 6c | 6f 77 20 74 6f 20 74 72 |s it..sl|ow to tr|
|000032a0| 61 69 6e 3b 20 62 75 74 | 20 62 65 69 6e 67 20 61 |ain; but| being a|
|000032b0| 20 66 65 65 64 66 6f 72 | 77 61 72 64 20 61 6c 67 | feedfor|ward alg|
|000032c0| 6f 72 69 74 68 6d 2c 20 | 69 74 20 69 73 20 71 75 |orithm, |it is qu|
|000032d0| 69 74 65 20 72 61 70 69 | 64 20 64 75 72 69 6e 67 |ite rapi|d during|
|000032e0| 0d 0a 74 68 65 20 72 65 | 63 61 6c 6c 20 70 68 61 |..the re|call pha|
|000032f0| 73 65 2e 0d 0a 0d 0a 4c | 69 74 65 72 61 74 75 72 |se.....L|iteratur|
|00003300| 65 3a 0d 0a 20 20 52 75 | 6d 65 6c 68 61 72 74 2c |e:.. Ru|melhart,|
|00003310| 20 44 2e 20 45 2e 20 61 | 6e 64 20 4d 63 43 6c 65 | D. E. a|nd McCle|
|00003320| 6c 6c 61 6e 64 2c 20 4a | 2e 20 4c 2e 20 28 31 39 |lland, J|. L. (19|
|00003330| 38 36 29 3a 20 0d 0a 20 | 20 50 61 72 61 6c 6c 65 |86): .. | Paralle|
|00003340| 6c 20 44 69 73 74 72 69 | 62 75 74 65 64 20 50 72 |l Distri|buted Pr|
|00003350| 6f 63 65 73 73 69 6e 67 | 3a 20 45 78 70 6c 6f 72 |ocessing|: Explor|
|00003360| 61 74 69 6f 6e 73 20 69 | 6e 20 74 68 65 0d 0a 20 |ations i|n the.. |
|00003370| 20 4d 69 63 72 6f 73 74 | 72 75 63 74 75 72 65 20 | Microst|ructure |
|00003380| 6f 66 20 43 6f 67 6e 69 | 74 69 6f 6e 20 28 76 6f |of Cogni|tion (vo|
|00003390| 6c 75 6d 65 20 31 2c 20 | 70 70 20 33 31 38 2d 33 |lume 1, |pp 318-3|
|000033a0| 36 32 29 2e 20 0d 0a 20 | 20 54 68 65 20 4d 49 54 |62). .. | The MIT|
|000033b0| 20 50 72 65 73 73 2e 20 | 0d 0a 28 74 68 69 73 20 | Press. |..(this |
|000033c0| 69 73 20 74 68 65 20 63 | 6c 61 73 73 69 63 20 6f |is the c|lassic o|
|000033d0| 6e 65 29 20 6f 72 20 6f | 6e 65 20 6f 66 20 74 68 |ne) or o|ne of th|
|000033e0| 65 20 64 6f 7a 65 6e 73 | 20 6f 66 20 6f 74 68 65 |e dozens| of othe|
|000033f0| 72 20 62 6f 6f 6b 73 20 | 0d 0a 6f 72 20 61 72 74 |r books |..or art|
|00003400| 69 63 6c 65 73 20 6f 6e | 20 62 61 63 6b 70 72 6f |icles on| backpro|
|00003410| 70 61 67 61 74 69 6f 6e | 20 20 3a 2d 3e 0d 0a 0d |pagation| :->...|
|00003420| 0a 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |.-------|--------|
|00003430| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00003440| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00003450| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00003460| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 0d 0a 0d 0a 2d 41 37 |--------|-....-A7|
|00003470| 2e 29 20 20 48 6f 77 20 | 6d 61 6e 79 20 6c 65 61 |.) How |many lea|
|00003480| 72 6e 69 6e 67 20 6d 65 | 74 68 6f 64 73 20 66 6f |rning me|thods fo|
|00003490| 72 20 4e 4e 73 20 65 78 | 69 73 74 20 3f 20 20 57 |r NNs ex|ist ? W|
|000034a0| 68 69 63 68 20 3f 0d 0a | 0d 0a 54 68 65 72 65 20 |hich ?..|..There |
|000034b0| 61 72 65 20 6d 61 6e 79 | 20 6d 61 6e 79 20 6c 65 |are many| many le|
|000034c0| 61 72 6e 69 6e 67 20 6d | 65 74 68 6f 64 73 20 66 |arning m|ethods f|
|000034d0| 6f 72 20 4e 4e 73 20 62 | 79 20 6e 6f 77 2e 20 4e |or NNs b|y now. N|
|000034e0| 6f 62 6f 64 79 20 63 61 | 6e 20 6b 6e 6f 77 20 0d |obody ca|n know .|
|000034f0| 0a 65 78 61 63 74 6c 79 | 20 68 6f 77 20 6d 61 6e |.exactly| how man|
|00003500| 79 2e 0d 0a 4e 65 77 20 | 6f 6e 65 73 20 28 61 74 |y...New |ones (at|
|00003510| 20 6c 65 61 73 74 20 76 | 61 72 69 61 74 69 6f 6e | least v|ariation|
|00003520| 73 20 6f 66 20 65 78 69 | 73 74 69 6e 67 20 6f 6e |s of exi|sting on|
|00003530| 65 73 29 20 61 72 65 20 | 69 6e 76 65 6e 74 65 64 |es) are |invented|
|00003540| 20 65 76 65 72 79 0d 0a | 77 65 65 6b 2e 20 42 65 | every..|week. Be|
|00003550| 6c 6f 77 20 69 73 20 61 | 20 63 6f 6c 6c 65 63 74 |low is a| collect|
|00003560| 69 6f 6e 20 6f 66 20 73 | 6f 6d 65 20 6f 66 20 74 |ion of s|ome of t|
|00003570| 68 65 20 6d 6f 73 74 20 | 77 65 6c 6c 20 6b 6e 6f |he most |well kno|
|00003580| 77 6e 20 6d 65 74 68 6f | 64 73 3b 0d 0a 6e 6f 74 |wn metho|ds;..not|
|00003590| 20 63 6c 61 69 6d 69 6e | 67 20 74 6f 20 62 65 20 | claimin|g to be |
|000035a0| 63 6f 6d 70 6c 65 74 65 | 2e 0d 0a 0d 0a 54 68 65 |complete|.....The|
|000035b0| 20 6d 61 69 6e 20 63 61 | 74 65 67 6f 72 69 7a 61 | main ca|tegoriza|
|000035c0| 74 69 6f 6e 20 6f 66 20 | 74 68 65 73 65 20 6d 65 |tion of |these me|
|000035d0| 74 68 6f 64 73 20 69 73 | 20 74 68 65 20 64 69 73 |thods is| the dis|
|000035e0| 74 69 63 74 69 6f 6e 20 | 6f 66 20 0d 0a 73 75 70 |tiction |of ..sup|
|000035f0| 65 72 76 69 73 65 64 20 | 66 72 6f 6d 20 75 6e 73 |ervised |from uns|
|00003600| 75 70 65 72 76 69 73 65 | 64 20 6c 65 61 72 6e 69 |upervise|d learni|
|00003610| 6e 67 3a 0d 0a 0d 0a 2d | 20 49 6e 20 73 75 70 65 |ng:....-| In supe|
|00003620| 72 76 69 73 65 64 20 6c | 65 61 72 6e 69 6e 67 2c |rvised l|earning,|
|00003630| 20 74 68 65 72 65 20 69 | 73 20 61 20 22 74 65 61 | there i|s a "tea|
|00003640| 63 68 65 72 22 20 77 68 | 6f 20 69 6e 20 74 68 65 |cher" wh|o in the|
|00003650| 20 6c 65 61 72 6e 69 6e | 67 0d 0a 20 20 70 68 61 | learnin|g.. pha|
|00003660| 73 65 20 22 74 65 6c 6c | 73 22 20 74 68 65 20 6e |se "tell|s" the n|
|00003670| 65 74 20 68 6f 77 20 77 | 65 6c 6c 20 69 74 20 70 |et how w|ell it p|
|00003680| 65 72 66 6f 72 6d 73 20 | 28 22 72 65 69 6e 66 6f |erforms |("reinfo|
|00003690| 72 63 65 6d 65 6e 74 20 | 6c 65 61 72 6e 69 6e 67 |rcement |learning|
|000036a0| 22 29 0d 0a 20 20 6f 72 | 20 77 68 61 74 20 74 68 |").. or| what th|
|000036b0| 65 20 63 6f 72 72 65 63 | 74 20 62 65 68 61 76 69 |e correc|t behavi|
|000036c0| 6f 72 20 77 6f 75 6c 64 | 20 68 61 76 65 20 62 65 |or would| have be|
|000036d0| 65 6e 20 28 22 66 75 6c | 6c 79 20 73 75 70 65 72 |en ("ful|ly super|
|000036e0| 76 69 73 65 64 20 6c 65 | 61 72 6e 69 6e 67 22 29 |vised le|arning")|
|000036f0| 2e 0d 0a 0d 0a 2d 20 49 | 6e 20 75 6e 73 75 70 65 |.....- I|n unsupe|
|00003700| 72 76 69 73 65 64 20 6c | 65 61 72 6e 69 6e 67 20 |rvised l|earning |
|00003710| 74 68 65 20 6e 65 74 20 | 69 73 20 61 75 74 6f 6e |the net |is auton|
|00003720| 6f 6d 6f 75 73 3a 20 69 | 74 20 6a 75 73 74 20 6c |omous: i|t just l|
|00003730| 6f 6f 6b 73 20 61 74 0d | 0a 20 20 74 68 65 20 64 |ooks at.|. the d|
|00003740| 61 74 61 20 69 74 20 69 | 73 20 70 72 65 73 65 6e |ata it i|s presen|
|00003750| 74 65 64 20 77 69 74 68 | 2c 20 66 69 6e 64 73 20 |ted with|, finds |
|00003760| 6f 75 74 20 61 62 6f 75 | 74 20 73 6f 6d 65 20 6f |out abou|t some o|
|00003770| 66 20 74 68 65 0d 0a 20 | 20 70 72 6f 70 65 72 74 |f the.. | propert|
|00003780| 69 65 73 20 6f 66 20 74 | 68 65 20 64 61 74 61 20 |ies of t|he data |
|00003790| 73 65 74 20 61 6e 64 20 | 6c 65 61 72 6e 73 20 74 |set and |learns t|
|000037a0| 6f 20 72 65 66 6c 65 63 | 74 20 74 68 65 73 65 20 |o reflec|t these |
|000037b0| 70 72 6f 70 65 72 74 69 | 65 73 20 0d 0a 20 20 69 |properti|es .. i|
|000037c0| 6e 20 69 74 73 20 6f 75 | 74 70 75 74 2e 20 57 68 |n its ou|tput. Wh|
|000037d0| 61 74 20 65 78 61 63 74 | 6c 79 20 74 68 65 73 65 |at exact|ly these|
|000037e0| 20 70 72 6f 70 65 72 74 | 69 65 73 20 61 72 65 2c | propert|ies are,|
|000037f0| 20 74 68 61 74 20 74 68 | 65 20 6e 65 74 77 6f 72 | that th|e networ|
|00003800| 6b 0d 0a 20 20 63 61 6e | 20 6c 65 61 72 6e 20 74 |k.. can| learn t|
|00003810| 6f 20 72 65 63 6f 67 6e | 69 73 65 2c 20 64 65 70 |o recogn|ise, dep|
|00003820| 65 6e 64 73 20 6f 6e 20 | 74 68 65 20 70 61 72 74 |ends on |the part|
|00003830| 69 63 75 6c 61 72 20 6e | 65 74 77 6f 72 6b 20 6d |icular n|etwork m|
|00003840| 6f 64 65 6c 20 61 6e 64 | 0d 0a 20 20 6c 65 61 72 |odel and|.. lear|
|00003850| 6e 69 6e 67 20 6d 65 74 | 68 6f 64 2e 0d 0a 20 20 |ning met|hod... |
|00003860| 0d 0a 4d 61 6e 79 20 6f | 66 20 74 68 65 73 65 20 |..Many o|f these |
|00003870| 6c 65 61 72 6e 69 6e 67 | 20 6d 65 74 68 6f 64 73 |learning| methods|
|00003880| 20 61 72 65 20 63 6c 6f | 73 65 6c 79 20 63 6f 6e | are clo|sely con|
|00003890| 6e 65 63 74 65 64 20 77 | 69 74 68 20 61 20 63 65 |nected w|ith a ce|
|000038a0| 72 74 61 69 6e 0d 0a 28 | 63 6c 61 73 73 20 6f 66 |rtain..(|class of|
|000038b0| 29 20 6e 65 74 77 6f 72 | 6b 20 74 6f 70 6f 6c 6f |) networ|k topolo|
|000038c0| 67 79 2e 0d 0a 0d 0a 4e | 6f 77 20 68 65 72 65 20 |gy.....N|ow here |
|000038d0| 69 73 20 74 68 65 20 6c | 69 73 74 2c 20 6a 75 73 |is the l|ist, jus|
|000038e0| 74 20 67 69 76 69 6e 67 | 20 73 6f 6d 65 20 6e 61 |t giving| some na|
|000038f0| 6d 65 73 3a 0d 0a 20 20 | 0d 0a 31 2e 20 55 4e 53 |mes:.. |..1. UNS|
|00003900| 55 50 45 52 56 49 53 45 | 44 20 4c 45 41 52 4e 49 |UPERVISE|D LEARNI|
|00003910| 4e 47 20 28 69 2e 65 2e | 20 77 69 74 68 6f 75 74 |NG (i.e.| without|
|00003920| 20 61 20 22 74 65 61 63 | 68 65 72 22 29 3a 0d 0a | a "teac|her"):..|
|00003930| 20 20 20 20 20 20 20 31 | 29 2e 20 46 65 65 64 62 | 1|). Feedb|
|00003940| 61 63 6b 20 4e 65 74 73 | 3a 0d 0a 09 20 20 20 61 |ack Nets|:... a|
|00003950| 29 2e 20 41 64 64 69 74 | 69 76 65 20 47 72 6f 73 |). Addit|ive Gros|
|00003960| 73 62 65 72 67 20 28 41 | 47 29 0d 0a 09 20 20 20 |sberg (A|G)... |
|00003970| 62 29 2e 20 53 68 75 6e | 74 69 6e 67 20 47 72 6f |b). Shun|ting Gro|
|00003980| 73 73 62 65 72 67 20 28 | 53 47 29 0d 0a 09 20 20 |ssberg (|SG)... |
|00003990| 20 63 29 2e 20 42 69 6e | 61 72 79 20 41 64 61 70 | c). Bin|ary Adap|
|000039a0| 74 69 76 65 20 52 65 73 | 6f 6e 61 6e 63 65 20 54 |tive Res|onance T|
|000039b0| 68 65 6f 72 79 20 28 41 | 52 54 31 29 0d 0a 09 20 |heory (A|RT1)... |
|000039c0| 20 20 64 29 2e 20 41 6e | 61 6c 6f 67 20 41 64 61 | d). An|alog Ada|
|000039d0| 70 74 69 76 65 20 52 65 | 73 6f 6e 61 6e 63 65 20 |ptive Re|sonance |
|000039e0| 54 68 65 6f 72 79 20 28 | 41 52 54 32 2c 20 41 52 |Theory (|ART2, AR|
|000039f0| 54 32 61 29 0d 0a 09 20 | 20 20 65 29 2e 20 44 69 |T2a)... | e). Di|
|00003a00| 73 63 72 65 74 65 20 48 | 6f 70 66 69 65 6c 64 20 |screte H|opfield |
|00003a10| 28 44 48 29 0d 0a 09 20 | 20 20 66 29 2e 20 43 6f |(DH)... | f). Co|
|00003a20| 6e 74 69 6e 75 6f 75 73 | 20 48 6f 70 66 69 65 6c |ntinuous| Hopfiel|
|00003a30| 64 20 28 43 48 29 0d 0a | 09 20 20 20 67 29 2e 20 |d (CH)..|. g). |
|00003a40| 44 69 73 63 72 65 74 65 | 20 42 69 64 69 72 65 63 |Discrete| Bidirec|
|00003a50| 74 69 6f 6e 61 6c 20 41 | 73 73 6f 63 69 61 74 69 |tional A|ssociati|
|00003a60| 76 65 20 4d 65 6d 6f 72 | 79 20 28 42 41 4d 29 0d |ve Memor|y (BAM).|
|00003a70| 0a 09 20 20 20 68 29 2e | 20 54 65 6d 70 6f 72 61 |.. h).| Tempora|
|00003a80| 6c 20 41 73 73 6f 63 69 | 61 74 69 76 65 20 4d 65 |l Associ|ative Me|
|00003a90| 6d 6f 72 79 20 28 54 41 | 4d 29 0d 0a 09 20 20 20 |mory (TA|M)... |
|00003aa0| 69 29 2e 20 41 64 61 70 | 74 69 76 65 20 42 69 64 |i). Adap|tive Bid|
|00003ab0| 69 72 65 63 74 69 6f 6e | 61 6c 20 41 73 73 6f 63 |irection|al Assoc|
|00003ac0| 69 61 74 69 76 65 20 4d | 65 6d 6f 72 79 20 28 41 |iative M|emory (A|
|00003ad0| 42 41 4d 29 0d 0a 20 20 | 20 20 20 20 20 20 20 20 |BAM).. | |
|00003ae0| 20 6a 29 2e 20 4b 6f 68 | 6f 6e 65 6e 20 53 65 6c | j). Koh|onen Sel|
|00003af0| 66 2d 6f 72 67 61 6e 69 | 7a 69 6e 67 20 4d 61 70 |f-organi|zing Map|
|00003b00| 20 28 53 4f 4d 29 0d 0a | 20 20 20 20 20 20 20 20 | (SOM)..| |
|00003b10| 20 20 20 6b 29 2e 20 4b | 6f 68 6f 6e 65 6e 20 54 | k). K|ohonen T|
|00003b20| 6f 70 6f 6c 6f 67 79 2d | 70 72 65 73 65 72 76 69 |opology-|preservi|
|00003b30| 6e 67 20 4d 61 70 20 28 | 54 50 4d 29 0d 0a 20 20 |ng Map (|TPM).. |
|00003b40| 20 20 20 20 20 32 29 2e | 20 46 65 65 64 66 6f 72 | 2).| Feedfor|
|00003b50| 77 61 72 64 2d 6f 6e 6c | 79 20 4e 65 74 73 3a 0d |ward-onl|y Nets:.|
|00003b60| 0a 09 20 20 20 61 29 2e | 20 4c 65 61 72 6e 69 6e |.. a).| Learnin|
|00003b70| 67 20 4d 61 74 72 69 78 | 20 28 4c 4d 29 0d 0a 09 |g Matrix| (LM)...|
|00003b80| 20 20 20 62 29 2e 20 44 | 72 69 76 65 72 2d 52 65 | b). D|river-Re|
|00003b90| 69 6e 66 6f 72 63 65 6d | 65 6e 74 20 4c 65 61 72 |inforcem|ent Lear|
|00003ba0| 6e 69 6e 67 20 28 44 52 | 29 0d 0a 09 20 20 20 63 |ning (DR|)... c|
|00003bb0| 29 2e 20 4c 69 6e 65 61 | 72 20 41 73 73 6f 63 69 |). Linea|r Associ|
|00003bc0| 61 74 69 76 65 20 4d 65 | 6d 6f 72 79 20 28 4c 41 |ative Me|mory (LA|
|00003bd0| 4d 29 0d 0a 09 20 20 20 | 64 29 2e 20 4f 70 74 69 |M)... |d). Opti|
|00003be0| 6d 61 6c 20 4c 69 6e 65 | 61 72 20 41 73 73 6f 63 |mal Line|ar Assoc|
|00003bf0| 69 61 74 69 76 65 20 4d | 65 6d 6f 72 79 20 28 4f |iative M|emory (O|
|00003c00| 4c 41 4d 29 0d 0a 09 20 | 20 20 65 29 2e 20 53 70 |LAM)... | e). Sp|
|00003c10| 61 72 73 65 20 44 69 73 | 74 72 69 62 75 74 65 64 |arse Dis|tributed|
|00003c20| 20 41 73 73 6f 63 69 61 | 74 69 76 65 20 4d 65 6d | Associa|tive Mem|
|00003c30| 6f 72 79 20 28 53 44 4d | 29 0d 0a 09 20 20 20 66 |ory (SDM|)... f|
|00003c40| 29 2e 20 46 75 7a 7a 79 | 20 41 73 73 6f 63 69 61 |). Fuzzy| Associa|
|00003c50| 74 69 76 65 20 4d 65 6d | 6f 72 79 20 28 46 41 4d |tive Mem|ory (FAM|
|00003c60| 29 0d 0a 09 20 20 20 67 | 29 2e 20 43 6f 75 6e 74 |)... g|). Count|
|00003c70| 65 72 70 72 6f 67 61 74 | 69 6f 6e 20 28 43 50 4e |erprogat|ion (CPN|
|00003c80| 29 0d 0a 0d 0a 32 2e 20 | 53 55 50 45 52 56 49 53 |)....2. |SUPERVIS|
|00003c90| 45 44 20 4c 45 41 52 4e | 49 4e 47 20 28 69 2e 65 |ED LEARN|ING (i.e|
|00003ca0| 2e 20 77 69 74 68 20 61 | 20 22 74 65 61 63 68 65 |. with a| "teache|
|00003cb0| 72 22 29 3a 0d 0a 20 20 | 20 20 20 20 20 31 29 2e |r"):.. | 1).|
|00003cc0| 20 46 65 65 64 62 61 63 | 6b 20 4e 65 74 73 3a 0d | Feedbac|k Nets:.|
|00003cd0| 0a 09 20 20 20 61 29 2e | 20 42 72 61 69 6e 2d 53 |.. a).| Brain-S|
|00003ce0| 74 61 74 65 2d 69 6e 2d | 61 2d 42 6f 78 20 28 42 |tate-in-|a-Box (B|
|00003cf0| 53 42 29 0d 0a 09 20 20 | 20 62 29 2e 20 46 75 7a |SB)... | b). Fuz|
|00003d00| 7a 79 20 43 6f 6e 67 69 | 74 69 76 65 20 4d 61 70 |zy Congi|tive Map|
|00003d10| 20 28 46 43 4d 29 0d 0a | 09 20 20 20 63 29 2e 20 | (FCM)..|. c). |
|00003d20| 42 6f 6c 74 7a 6d 61 6e | 6e 20 4d 61 63 68 69 6e |Boltzman|n Machin|
|00003d30| 65 20 28 42 4d 29 0d 0a | 20 20 20 20 20 20 20 20 |e (BM)..| |
|00003d40| 20 20 20 64 29 2e 20 4d | 65 61 6e 20 46 69 65 6c | d). M|ean Fiel|
|00003d50| 64 20 41 6e 6e 65 61 6c | 69 6e 67 20 28 4d 46 54 |d Anneal|ing (MFT|
|00003d60| 29 0d 0a 20 20 20 20 20 | 20 20 20 20 20 20 65 29 |).. | e)|
|00003d70| 2e 20 52 65 63 75 72 72 | 65 6e 74 20 43 61 73 63 |. Recurr|ent Casc|
|00003d80| 61 64 65 20 43 6f 72 72 | 65 6c 61 74 69 6f 6e 20 |ade Corr|elation |
|00003d90| 28 52 43 43 29 0d 0a 09 | 20 20 20 66 29 2e 20 4c |(RCC)...| f). L|
|00003da0| 65 61 72 6e 69 6e 67 20 | 56 65 63 74 6f 72 20 51 |earning |Vector Q|
|00003db0| 75 61 6e 74 69 7a 61 74 | 69 6f 6e 20 28 4c 56 51 |uantizat|ion (LVQ|
|00003dc0| 29 0d 0a 20 20 20 20 20 | 20 20 32 29 2e 20 46 65 |).. | 2). Fe|
|00003dd0| 65 64 66 6f 72 77 61 72 | 64 2d 6f 6e 6c 79 20 4e |edforwar|d-only N|
|00003de0| 65 74 73 3a 0d 0a 09 20 | 20 20 61 29 2e 20 50 65 |ets:... | a). Pe|
|00003df0| 72 63 65 70 74 72 6f 6e | 0d 0a 09 20 20 20 62 29 |rceptron|... b)|
|00003e00| 2e 20 41 64 61 6c 69 6e | 65 2c 20 4d 61 64 61 6c |. Adalin|e, Madal|
|00003e10| 69 6e 65 0d 0a 09 20 20 | 20 63 29 2e 20 42 61 63 |ine... | c). Bac|
|00003e20| 6b 70 72 6f 70 61 67 61 | 74 69 6f 6e 20 28 42 50 |kpropaga|tion (BP|
|00003e30| 29 0d 0a 09 20 20 20 64 | 29 2e 20 43 61 75 63 68 |)... d|). Cauch|
|00003e40| 79 20 4d 61 63 68 69 6e | 65 20 28 43 4d 29 0d 0a |y Machin|e (CM)..|
|00003e50| 09 20 20 20 65 29 2e 20 | 41 64 61 70 74 69 76 65 |. e). |Adaptive|
|00003e60| 20 48 65 75 72 69 73 74 | 69 63 20 43 72 69 74 69 | Heurist|ic Criti|
|00003e70| 63 20 28 41 48 43 29 0d | 0a 20 20 20 20 20 20 20 |c (AHC).|. |
|00003e80| 20 20 20 20 66 29 2e 20 | 54 69 6d 65 20 44 65 6c | f). |Time Del|
|00003e90| 61 79 20 4e 65 75 72 61 | 6c 20 4e 65 74 77 6f 72 |ay Neura|l Networ|
|00003ea0| 6b 20 28 54 44 4e 4e 29 | 0d 0a 09 20 20 20 67 29 |k (TDNN)|... g)|
|00003eb0| 2e 20 41 73 73 6f 63 69 | 61 74 69 76 65 20 52 65 |. Associ|ative Re|
|00003ec0| 77 61 72 64 20 50 65 6e | 61 6c 74 79 20 28 41 52 |ward Pen|alty (AR|
|00003ed0| 50 29 0d 0a 09 20 20 20 | 68 29 2e 20 41 76 61 6c |P)... |h). Aval|
|00003ee0| 61 6e 63 68 65 20 4d 61 | 74 63 68 65 64 20 46 69 |anche Ma|tched Fi|
|00003ef0| 6c 74 65 72 20 28 41 4d | 46 29 0d 0a 20 20 20 20 |lter (AM|F).. |
|00003f00| 20 20 20 20 20 20 20 69 | 29 2e 20 42 61 63 6b 70 | i|). Backp|
|00003f10| 65 72 63 6f 6c 61 74 69 | 6f 6e 20 28 50 65 72 63 |ercolati|on (Perc|
|00003f20| 29 0d 0a 20 20 20 20 20 | 20 20 20 20 20 20 6a 29 |).. | j)|
|00003f30| 2e 20 41 72 74 6d 61 70 | 0d 0a 20 20 20 20 20 20 |. Artmap|.. |
|00003f40| 20 20 20 20 20 6b 29 2e | 20 41 64 61 70 74 69 76 | k).| Adaptiv|
|00003f50| 65 20 4c 6f 67 69 63 20 | 4e 65 74 77 6f 72 6b 20 |e Logic |Network |
|00003f60| 28 41 4c 4e 29 0d 0a 20 | 20 20 20 20 20 20 20 20 |(ALN).. | |
|00003f70| 20 20 6c 29 2e 20 43 61 | 73 63 61 64 65 20 43 6f | l). Ca|scade Co|
|00003f80| 72 72 65 6c 61 74 69 6f | 6e 20 28 43 61 73 43 6f |rrelatio|n (CasCo|
|00003f90| 72 29 0d 0a 0d 0a 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |r)....--|--------|
|00003fa0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00003fb0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00003fc0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00003fd0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 0d 0a |--------|------..|
|00003fe0| 0d 0a 2d 41 38 2e 29 20 | 20 57 68 61 74 20 61 62 |..-A8.) | What ab|
|00003ff0| 6f 75 74 20 47 65 6e 65 | 74 69 63 20 41 6c 67 6f |out Gene|tic Algo|
|00004000| 72 69 74 68 6d 73 20 3f | 0d 0a 0d 0a 5b 70 72 65 |rithms ?|....[pre|
|00004010| 6c 69 6d 69 6e 61 72 79 | 5d 0d 0a 5b 57 68 6f 20 |liminary|]..[Who |
|00004020| 77 69 6c 6c 20 77 72 69 | 74 65 20 61 20 62 65 74 |will wri|te a bet|
|00004030| 74 65 72 20 69 6e 74 72 | 6f 64 75 63 74 69 6f 6e |ter intr|oduction|
|00004040| 3f 5d 0d 0a 0d 0a 54 68 | 65 72 65 20 61 72 65 20 |?]....Th|ere are |
|00004050| 61 20 6e 75 6d 62 65 72 | 20 6f 66 20 64 65 66 69 |a number| of defi|
|00004060| 6e 69 74 69 6f 6e 73 20 | 6f 66 20 47 41 20 28 47 |nitions |of GA (G|
|00004070| 65 6e 65 74 69 63 20 41 | 6c 67 6f 72 69 74 68 6d |enetic A|lgorithm|
|00004080| 29 2e 0d 0a 41 20 70 6f | 73 73 69 62 6c 65 20 6f |)...A po|ssible o|
|00004090| 6e 65 20 69 73 0d 0a 0d | 0a 20 20 41 20 47 41 20 |ne is...|. A GA |
|000040a0| 69 73 20 61 6e 20 6f 70 | 74 69 6d 69 7a 61 74 69 |is an op|timizati|
|000040b0| 6f 6e 20 70 72 6f 67 72 | 61 6d 20 0d 0a 20 20 74 |on progr|am .. t|
|000040c0| 68 61 74 20 73 74 61 72 | 74 73 20 77 69 74 68 20 |hat star|ts with |
|000040d0| 73 6f 6d 65 20 65 6e 63 | 6f 64 65 64 20 70 72 6f |some enc|oded pro|
|000040e0| 63 65 64 75 72 65 2c 20 | 20 28 43 72 65 61 74 69 |cedure, | (Creati|
|000040f0| 6f 6e 20 6f 66 20 4c 69 | 66 65 20 3a 2d 3e 20 29 |on of Li|fe :-> )|
|00004100| 0d 0a 20 20 6d 75 74 61 | 74 65 73 20 69 74 20 73 |.. muta|tes it s|
|00004110| 74 6f 63 68 61 73 74 69 | 63 61 6c 6c 79 2c 20 20 |tochasti|cally, |
|00004120| 20 20 20 20 20 20 20 20 | 20 20 20 20 20 20 28 47 | | (G|
|00004130| 65 74 20 63 61 6e 63 65 | 72 20 6f 72 20 73 6f 20 |et cance|r or so |
|00004140| 3a 2d 3e 20 29 0d 0a 20 | 20 61 6e 64 20 75 73 65 |:-> ).. | and use|
|00004150| 73 20 61 20 73 65 6c 65 | 63 74 69 6f 6e 20 70 72 |s a sele|ction pr|
|00004160| 6f 63 65 73 73 20 20 20 | 20 20 20 20 20 20 20 20 |ocess | |
|00004170| 20 20 20 28 44 61 72 77 | 69 6e 69 73 6d 29 0d 0a | (Darw|inism)..|
|00004180| 20 20 74 6f 20 70 72 65 | 66 65 72 20 74 68 65 20 | to pre|fer the |
|00004190| 6d 75 74 61 6e 74 73 20 | 77 69 74 68 20 68 69 67 |mutants |with hig|
|000041a0| 68 20 66 69 74 6e 65 73 | 73 0d 0a 20 20 61 6e 64 |h fitnes|s.. and|
|000041b0| 20 70 65 72 68 61 70 73 | 20 61 20 72 65 63 6f 6d | perhaps| a recom|
|000041c0| 62 69 6e 61 74 69 6f 6e | 20 70 72 6f 63 65 73 73 |bination| process|
|000041d0| 20 20 20 20 20 20 20 28 | 4d 61 6b 65 20 62 61 62 | (|Make bab|
|000041e0| 69 65 73 20 3a 2d 3e 20 | 29 0d 0a 20 20 74 6f 20 |ies :-> |).. to |
|000041f0| 63 6f 6d 62 69 6e 65 20 | 70 72 6f 70 65 72 74 69 |combine |properti|
|00004200| 65 73 20 6f 66 20 28 70 | 72 65 66 65 72 61 62 6c |es of (p|referabl|
|00004210| 79 29 20 74 68 65 20 73 | 75 63 63 65 73 66 75 6c |y) the s|uccesful|
|00004220| 20 6d 75 74 61 6e 74 73 | 2e 0d 0a 0d 0a 54 68 65 | mutants|.....The|
|00004230| 72 65 20 69 73 20 61 20 | 6e 65 77 73 67 72 6f 75 |re is a |newsgrou|
|00004240| 70 20 74 68 61 74 20 69 | 73 20 64 65 64 69 63 61 |p that i|s dedica|
|00004250| 74 65 64 20 74 6f 20 47 | 65 6e 65 74 69 63 20 41 |ted to G|enetic A|
|00004260| 6c 67 6f 72 69 74 68 6d | 73 20 0d 0a 63 61 6c 6c |lgorithm|s ..call|
|00004270| 65 64 20 63 6f 6d 70 2e | 61 69 2e 67 65 6e 65 74 |ed comp.|ai.genet|
|00004280| 69 63 2e 0d 0a 53 6f 6d | 65 20 47 41 20 64 69 73 |ic...Som|e GA dis|
|00004290| 63 75 73 73 69 6f 6e 20 | 61 6c 73 6f 20 74 65 6e |cussion |also ten|
|000042a0| 64 73 20 74 6f 20 68 61 | 70 70 65 6e 20 69 6e 20 |ds to ha|ppen in |
|000042b0| 63 6f 6d 70 2e 61 69 2e | 6e 65 75 72 61 6c 2d 6e |comp.ai.|neural-n|
|000042c0| 65 74 73 2e 0d 0a 41 6e | 6f 74 68 65 72 20 6c 6f |ets...An|other lo|
|000042d0| 6f 73 65 6c 79 20 72 65 | 6c 65 76 61 6e 74 20 67 |osely re|levant g|
|000042e0| 72 6f 75 70 20 69 73 20 | 63 6f 6d 70 2e 74 68 65 |roup is |comp.the|
|000042f0| 6f 72 79 2e 73 65 6c 66 | 2d 6f 72 67 2d 73 79 73 |ory.self|-org-sys|
|00004300| 2e 0d 0a 54 68 65 72 65 | 20 69 73 20 61 20 47 41 |...There| is a GA|
|00004310| 20 6d 61 69 6c 69 6e 67 | 20 6c 69 73 74 20 77 68 | mailing| list wh|
|00004320| 69 63 68 20 79 6f 75 20 | 63 61 6e 20 73 75 62 73 |ich you |can subs|
|00004330| 63 72 69 62 65 20 74 6f | 20 62 79 0d 0a 73 65 6e |cribe to| by..sen|
|00004340| 64 69 6e 67 20 61 20 72 | 65 71 75 65 73 74 20 74 |ding a r|equest t|
|00004350| 6f 20 47 41 2d 4c 69 73 | 74 2d 52 65 71 75 65 73 |o GA-Lis|t-Reques|
|00004360| 74 40 41 49 43 2e 4e 52 | 4c 2e 4e 41 56 59 2e 4d |t@AIC.NR|L.NAVY.M|
|00004370| 49 4c 0d 0a 59 6f 75 20 | 63 61 6e 20 61 6c 73 6f |IL..You |can also|
|00004380| 20 74 72 79 20 61 6e 6f | 6e 79 6d 6f 75 73 20 66 | try ano|nymous f|
|00004390| 74 70 20 74 6f 0d 0a 20 | 20 66 74 70 2e 61 69 63 |tp to.. | ftp.aic|
|000043a0| 2e 6e 72 6c 2e 6e 61 76 | 79 2e 6d 69 6c 0d 0a 69 |.nrl.nav|y.mil..i|
|000043b0| 6e 20 74 68 65 20 2f 70 | 75 62 2f 67 61 6c 69 73 |n the /p|ub/galis|
|000043c0| 74 20 64 69 72 65 63 74 | 6f 72 79 2e 20 54 68 65 |t direct|ory. The|
|000043d0| 72 65 20 61 72 65 20 70 | 61 70 65 72 73 20 61 6e |re are p|apers an|
|000043e0| 64 20 73 6f 6d 65 20 73 | 6f 66 74 77 61 72 65 2e |d some s|oftware.|
|000043f0| 0d 0a 0d 0a 46 6f 72 20 | 6d 6f 72 65 20 64 65 74 |....For |more det|
|00004400| 61 69 6c 73 20 73 65 65 | 20 28 66 6f 72 20 65 78 |ails see| (for ex|
|00004410| 61 6d 70 6c 65 29 3a 0d | 0a 0d 0a 22 47 65 6e 65 |ample):.|..."Gene|
|00004420| 74 69 63 20 41 6c 67 6f | 72 69 74 68 6d 73 20 69 |tic Algo|rithms i|
|00004430| 6e 20 53 65 61 72 63 68 | 20 4f 70 74 69 6d 69 73 |n Search| Optimis|
|00004440| 61 74 69 6f 6e 20 61 6e | 64 20 4d 61 63 68 69 6e |ation an|d Machin|
|00004450| 65 20 4c 65 61 72 6e 69 | 6e 67 22 0d 0a 62 79 20 |e Learni|ng"..by |
|00004460| 44 61 76 69 64 20 47 6f | 6c 64 62 65 72 67 20 28 |David Go|ldberg (|
|00004470| 41 64 64 69 73 6f 6e 2d | 57 65 73 6c 65 79 20 31 |Addison-|Wesley 1|
|00004480| 39 38 39 2c 20 30 2d 32 | 30 31 2d 31 35 37 36 37 |989, 0-2|01-15767|
|00004490| 2d 35 29 20 6f 72 20 0d | 0a 0d 0a 22 48 61 6e 64 |-5) or .|..."Hand|
|000044a0| 62 6f 6f 6b 20 6f 66 20 | 47 65 6e 65 74 69 63 20 |book of |Genetic |
|000044b0| 41 6c 67 6f 72 69 74 68 | 6d 73 22 0d 0a 65 64 69 |Algorith|ms"..edi|
|000044c0| 74 65 64 20 62 79 20 4c | 61 77 72 65 6e 63 65 20 |ted by L|awrence |
|000044d0| 44 61 76 69 73 20 28 56 | 61 6e 20 4e 6f 73 74 72 |Davis (V|an Nostr|
|000044e0| 61 6e 64 20 52 65 69 6e | 68 6f 6c 64 20 31 39 39 |and Rein|hold 199|
|000044f0| 31 20 30 2d 34 34 32 2d | 30 30 31 37 33 2d 38 29 |1 0-442-|00173-8)|
|00004500| 20 6f 72 0d 0a 0d 0a 22 | 43 6c 61 73 73 69 66 69 | or...."|Classifi|
|00004510| 65 72 20 53 79 73 74 65 | 6d 73 20 61 6e 64 20 47 |er Syste|ms and G|
|00004520| 65 6e 65 74 69 63 20 41 | 6c 67 6f 72 69 74 68 6d |enetic A|lgorithm|
|00004530| 73 22 0d 0a 4c 2e 42 2e | 20 42 6f 6f 6b 65 72 2c |s"..L.B.| Booker,|
|00004540| 20 44 2e 45 2e 20 47 6f | 6c 64 62 65 72 67 20 61 | D.E. Go|ldberg a|
|00004550| 6e 64 20 4a 2e 48 2e 20 | 48 6f 6c 6c 61 6e 64 2c |nd J.H. |Holland,|
|00004560| 20 54 65 63 68 72 65 70 | 6f 72 74 20 4e 6f 2e 20 | Techrep|ort No. |
|00004570| 38 20 28 41 70 72 69 6c | 20 38 37 29 2c 0d 0a 43 |8 (April| 87),..C|
|00004580| 6f 67 6e 69 74 69 76 65 | 20 53 63 69 65 6e 63 65 |ognitive| Science|
|00004590| 20 61 6e 64 20 4d 61 63 | 68 69 6e 65 20 49 6e 74 | and Mac|hine Int|
|000045a0| 65 6c 6c 69 67 65 6e 63 | 65 20 4c 61 62 6f 72 61 |elligenc|e Labora|
|000045b0| 74 6f 72 79 2c 20 55 6e | 69 76 65 72 73 69 74 79 |tory, Un|iversity|
|000045c0| 20 6f 66 20 4d 69 63 68 | 69 67 61 6e 0d 0a 20 20 | of Mich|igan.. |
|000045d0| 61 6c 73 6f 20 72 65 70 | 72 69 6e 74 65 64 20 69 |also rep|rinted i|
|000045e0| 6e 20 3a 0d 0a 41 72 74 | 69 66 69 63 69 61 6c 20 |n :..Art|ificial |
|000045f0| 49 6e 74 65 6c 6c 69 67 | 65 6e 63 65 2c 20 56 6f |Intellig|ence, Vo|
|00004600| 6c 75 6d 65 20 34 30 20 | 28 31 39 38 39 29 2c 20 |lume 40 |(1989), |
|00004610| 70 61 67 65 73 20 31 38 | 35 2d 32 33 34 0d 0a 0d |pages 18|5-234...|
|00004620| 0a 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |.-------|--------|
|00004630| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00004640| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00004650| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00004660| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 0d 0a 0d 0a 2d 41 39 |--------|-....-A9|
|00004670| 2e 29 20 20 57 68 61 74 | 20 61 62 6f 75 74 20 46 |.) What| about F|
|00004680| 75 7a 7a 79 20 4c 6f 67 | 69 63 20 3f 0d 0a 0d 0a |uzzy Log|ic ?....|
|00004690| 5b 70 72 65 6c 69 6d 69 | 6e 61 72 79 5d 0d 0a 5b |[prelimi|nary]..[|
|000046a0| 57 68 6f 20 77 69 6c 6c | 20 77 72 69 74 65 20 61 |Who will| write a|
|000046b0| 6e 20 69 6e 74 72 6f 64 | 75 63 74 69 6f 6e 3f 5d |n introd|uction?]|
|000046c0| 0d 0a 0d 0a 46 75 7a 7a | 79 20 4c 6f 67 69 63 20 |....Fuzz|y Logic |
|000046d0| 69 73 20 61 6e 20 61 72 | 65 61 20 6f 66 20 72 65 |is an ar|ea of re|
|000046e0| 73 65 61 72 63 68 20 62 | 61 73 65 64 20 6f 6e 20 |search b|ased on |
|000046f0| 74 68 65 20 77 6f 72 6b | 20 6f 66 20 4c 2e 41 2e |the work| of L.A.|
|00004700| 20 5a 61 64 65 68 2e 0d | 0a 49 74 20 69 73 20 61 | Zadeh..|.It is a|
|00004710| 20 64 65 70 61 72 74 75 | 72 65 20 66 72 6f 6d 20 | departu|re from |
|00004720| 63 6c 61 73 73 69 63 61 | 6c 20 74 77 6f 2d 76 61 |classica|l two-va|
|00004730| 6c 75 65 64 20 73 65 74 | 73 20 61 6e 64 20 6c 6f |lued set|s and lo|
|00004740| 67 69 63 2c 20 74 68 61 | 74 20 75 73 65 73 0d 0a |gic, tha|t uses..|
|00004750| 22 73 6f 66 74 22 20 6c | 69 6e 67 75 69 73 74 69 |"soft" l|inguisti|
|00004760| 63 20 28 65 2e 67 2e 20 | 6c 61 72 67 65 2c 20 68 |c (e.g. |large, h|
|00004770| 6f 74 2c 20 74 61 6c 6c | 29 20 73 79 73 74 65 6d |ot, tall|) system|
|00004780| 20 76 61 72 69 61 62 6c | 65 73 20 61 6e 64 20 61 | variabl|es and a|
|00004790| 0d 0a 63 6f 6e 74 69 6e | 75 6f 75 73 20 72 61 6e |..contin|uous ran|
|000047a0| 67 65 20 6f 66 20 74 72 | 75 74 68 20 76 61 6c 75 |ge of tr|uth valu|
|000047b0| 65 73 20 69 6e 20 74 68 | 65 20 69 6e 74 65 72 76 |es in th|e interv|
|000047c0| 61 6c 20 5b 30 2c 31 5d | 2c 20 72 61 74 68 65 72 |al [0,1]|, rather|
|000047d0| 20 74 68 61 6e 0d 0a 73 | 74 72 69 63 74 20 62 69 | than..s|trict bi|
|000047e0| 6e 61 72 79 20 28 54 72 | 75 65 20 6f 72 20 46 61 |nary (Tr|ue or Fa|
|000047f0| 6c 73 65 29 20 64 65 63 | 69 73 69 6f 6e 73 20 61 |lse) dec|isions a|
|00004800| 6e 64 20 61 73 73 69 67 | 6e 6d 65 6e 74 73 2e 0d |nd assig|nments..|
|00004810| 0a 46 75 7a 7a 79 20 6c | 6f 67 69 63 20 69 73 20 |.Fuzzy l|ogic is |
|00004820| 75 73 65 64 20 77 68 65 | 72 65 20 61 20 73 79 73 |used whe|re a sys|
|00004830| 74 65 6d 20 69 73 20 64 | 69 66 66 69 63 75 6c 74 |tem is d|ifficult|
|00004840| 20 74 6f 20 6d 6f 64 65 | 6c 2c 20 69 73 0d 0a 63 | to mode|l, is..c|
|00004850| 6f 6e 74 72 6f 6c 6c 65 | 64 20 62 79 20 61 20 68 |ontrolle|d by a h|
|00004860| 75 6d 61 6e 20 6f 70 65 | 72 61 74 6f 72 20 6f 72 |uman ope|rator or|
|00004870| 20 65 78 70 65 72 74 2c | 20 6f 72 20 77 68 65 72 | expert,| or wher|
|00004880| 65 20 61 6d 62 69 67 75 | 69 74 79 20 6f 72 0d 0a |e ambigu|ity or..|
|00004890| 76 61 67 75 65 6e 65 73 | 73 20 69 73 20 63 6f 6d |vaguenes|s is com|
|000048a0| 6d 6f 6e 2e 20 20 41 20 | 74 79 70 69 63 61 6c 20 |mon. A |typical |
|000048b0| 66 75 7a 7a 79 20 73 79 | 73 74 65 6d 20 63 6f 6e |fuzzy sy|stem con|
|000048c0| 73 69 73 74 73 20 6f 66 | 20 61 20 72 75 6c 65 20 |sists of| a rule |
|000048d0| 62 61 73 65 2c 0d 0a 6d | 65 6d 62 65 72 73 68 69 |base,..m|embershi|
|000048e0| 70 20 66 75 6e 63 74 69 | 6f 6e 73 2c 20 61 6e 64 |p functi|ons, and|
|000048f0| 20 61 6e 20 69 6e 66 65 | 72 65 6e 63 65 20 70 72 | an infe|rence pr|
|00004900| 6f 63 65 64 75 72 65 2e | 0d 0a 0d 0a 4d 6f 73 74 |ocedure.|....Most|
|00004910| 20 46 75 7a 7a 79 20 4c | 6f 67 69 63 20 64 69 73 | Fuzzy L|ogic dis|
|00004920| 63 75 73 73 69 6f 6e 20 | 74 61 6b 65 73 20 70 6c |cussion |takes pl|
|00004930| 61 63 65 20 69 6e 20 74 | 68 65 20 6e 65 77 73 67 |ace in t|he newsg|
|00004940| 72 6f 75 70 20 63 6f 6d | 70 2e 61 69 2e 66 75 7a |roup com|p.ai.fuz|
|00004950| 7a 79 2c 0d 0a 62 75 74 | 20 74 68 65 72 65 20 69 |zy,..but| there i|
|00004960| 73 20 61 6c 73 6f 20 73 | 6f 6d 65 20 77 6f 72 6b |s also s|ome work|
|00004970| 20 28 61 6e 64 20 64 69 | 73 63 75 73 73 69 6f 6e | (and di|scussion|
|00004980| 29 20 61 62 6f 75 74 20 | 63 6f 6d 62 69 6e 69 6e |) about |combinin|
|00004990| 67 20 66 75 7a 7a 79 0d | 0a 6c 6f 67 69 63 20 77 |g fuzzy.|.logic w|
|000049a0| 69 74 68 20 4e 65 75 72 | 61 6c 20 4e 65 74 77 6f |ith Neur|al Netwo|
|000049b0| 72 6b 20 61 70 70 72 6f | 61 63 68 65 73 20 69 6e |rk appro|aches in|
|000049c0| 20 63 6f 6d 70 2e 61 69 | 2e 6e 65 75 72 61 6c 2d | comp.ai|.neural-|
|000049d0| 6e 65 74 73 2e 0d 0a 0d | 0a 46 6f 72 20 6d 6f 72 |nets....|.For mor|
|000049e0| 65 20 64 65 74 61 69 6c | 73 20 73 65 65 20 28 66 |e detail|s see (f|
|000049f0| 6f 72 20 65 78 61 6d 70 | 6c 65 29 3a 0d 0a 0d 0a |or examp|le):....|
|00004a00| 4b 6c 69 72 2c 20 47 2e | 4a 2e 20 61 6e 64 20 46 |Klir, G.|J. and F|
|00004a10| 6f 6c 67 65 72 2c 20 54 | 2e 41 2e 2c 20 46 75 7a |olger, T|.A., Fuz|
|00004a20| 7a 79 20 53 65 74 73 2c | 20 55 6e 63 65 72 74 61 |zy Sets,| Uncerta|
|00004a30| 69 6e 74 79 2c 20 61 6e | 64 20 0d 0a 49 6e 66 6f |inty, an|d ..Info|
|00004a40| 72 6d 61 74 69 6f 6e 2c | 20 50 72 65 6e 74 69 63 |rmation,| Prentic|
|00004a50| 65 2d 48 61 6c 6c 2c 20 | 45 6e 67 6c 65 77 6f 6f |e-Hall, |Englewoo|
|00004a60| 64 20 0d 0a 43 6c 69 66 | 66 73 2c 20 4e 2e 4a 2e |d ..Clif|fs, N.J.|
|00004a70| 2c 20 31 39 38 38 2e 0d | 0a 0d 0a 4b 6f 73 6b 6f |, 1988..|...Kosko|
|00004a80| 2c 20 42 2e 2c 20 4e 65 | 75 72 61 6c 20 4e 65 74 |, B., Ne|ural Net|
|00004a90| 77 6f 72 6b 73 20 61 6e | 64 20 46 75 7a 7a 79 20 |works an|d Fuzzy |
|00004aa0| 53 79 73 74 65 6d 73 2c | 20 50 72 65 6e 74 69 63 |Systems,| Prentic|
|00004ab0| 65 20 48 61 6c 6c 2c 20 | 0d 0a 45 6e 67 6c 65 77 |e Hall, |..Englew|
|00004ac0| 6f 6f 64 20 43 6c 69 66 | 66 73 2c 20 4e 4a 2c 20 |ood Clif|fs, NJ, |
|00004ad0| 31 39 39 32 2e 0d 0a 0d | 0a 2d 2d 2d 2d 2d 2d 2d |1992....|.-------|
|00004ae0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00004af0| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00004b00| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00004b10| 2d 2d 2d 2d 2d 2d 2d 2d | 2d 2d 2d 2d 2d 2d 2d 2d |--------|--------|
|00004b20| 2d 0d 0a 0d 0a 2d 41 31 | 30 2e 29 20 47 6f 6f 64 |-....-A1|0.) Good|
|00004b30| 20 69 6e 74 72 6f 64 75 | 63 74 6f 72 79 20 6c 69 | introdu|ctory li|
|00004b40| 74 65 72 61 74 75 72 65 | 20 61 62 6f 75 74 20 4e |terature| about N|
|00004b50| 65 75 72 61 6c 20 4e 65 | 74 77 6f 72 6b 73 20 3f |eural Ne|tworks ?|
|00004b60| 0d 0a 0d 0a 30 2e 29 20 | 54 68 65 20 62 65 73 74 |....0.) |The best|
|00004b70| 20 28 73 75 62 6a 65 63 | 74 69 76 65 6c 79 2c 20 | (subjec|tively, |
|00004b80| 6f 66 20 63 6f 75 72 73 | 65 20 2d 2d 20 70 6c 65 |of cours|e -- ple|
|00004b90| 61 73 65 20 64 6f 6e 27 | 74 20 66 6c 61 6d 65 20 |ase don'|t flame |
|00004ba0| 6d 65 29 3a 0d 0a 0d 0a | 48 65 63 68 74 2d 4e 69 |me):....|Hecht-Ni|
|00004bb0| 65 6c 73 65 6e 2c 20 52 | 2e 20 28 31 39 39 30 29 |elsen, R|. (1990)|
|00004bc0| 2e 20 4e 65 75 72 6f 63 | 6f 6d 70 75 74 69 6e 67 |. Neuroc|omputing|
|00004bd0| 2e 20 41 64 64 69 73 6f | 6e 20 57 65 73 6c 65 79 |. Addiso|n Wesley|
|00004be0| 2e 0d 0a 43 6f 6d 6d 65 | 6e 74 73 3a 20 22 41 20 |...Comme|nts: "A |
|00004bf0| 67 6f 6f 64 20 62 6f 6f | 6b 22 2c 20 22 63 6f 6d |good boo|k", "com|
|00004c00| 70 72 69 73 65 73 20 61 | 20 6e 69 63 65 20 68 69 |prises a| nice hi|
|00004c10| 73 74 6f 72 69 63 61 6c | 20 6f 76 65 72 76 69 65 |storical| overvie|
|00004c20| 77 20 61 6e 64 20 61 20 | 63 68 61 70 74 65 72 0d |w and a |chapter.|
|00004c30| 0a 61 62 6f 75 74 20 4e | 4e 20 68 61 72 64 77 61 |.about N|N hardwa|
|00004c40| 72 65 2e 20 57 65 6c 6c | 20 73 74 72 75 63 74 75 |re. Well| structu|
|00004c50| 72 65 64 20 70 72 6f 73 | 65 2e 20 4d 61 6b 65 73 |red pros|e. Makes|
|00004c60| 20 69 6d 70 6f 72 74 61 | 6e 74 20 63 6f 6e 63 65 | importa|nt conce|
|00004c70| 70 74 73 20 63 6c 65 61 | 72 2e 22 0d 0a 0d 0a 48 |pts clea|r."....H|
|00004c80| 65 72 74 7a 2c 20 4a 2e | 2c 20 4b 72 6f 67 68 2c |ertz, J.|, Krogh,|
|00004c90| 20 41 2e 2c 20 61 6e 64 | 20 50 61 6c 6d 65 72 2c | A., and| Palmer,|
|00004ca0| 20 52 2e 20 28 31 39 39 | 31 29 2e 20 49 6e 74 72 | R. (199|1). Intr|
|00004cb0| 6f 64 75 63 74 69 6f 6e | 20 74 6f 20 74 68 65 20 |oduction| to the |
|00004cc0| 54 68 65 6f 72 79 20 6f | 66 20 0d 0a 4e 65 75 72 |Theory o|f ..Neur|
|00004cd0| 61 6c 20 43 6f 6d 70 75 | 74 61 74 69 6f 6e 2e 20 |al Compu|tation. |
|00004ce0| 41 64 64 69 73 6f 6e 2d | 57 65 73 6c 65 79 3a 20 |Addison-|Wesley: |
|00004cf0| 52 65 64 77 6f 6f 64 20 | 43 69 74 79 2c 20 43 61 |Redwood |City, Ca|
|00004d00| 6c 69 66 6f 72 6e 69 61 | 2e 0d 0a 49 53 42 4e 20 |lifornia|...ISBN |
|00004d10| 30 2d 32 30 31 2d 35 30 | 33 39 35 2d 36 20 28 68 |0-201-50|395-6 (h|
|00004d20| 61 72 64 62 6f 75 6e 64 | 29 20 61 6e 64 20 30 2d |ardbound|) and 0-|
|00004d30| 32 30 31 2d 35 31 35 36 | 30 2d 31 20 28 70 61 70 |201-5156|0-1 (pap|
|00004d40| 65 72 62 6f 75 6e 64 29 | 0d 0a 43 6f 6d 6d 65 6e |erbound)|..Commen|
|00004d50| 74 73 3a 20 22 4d 79 20 | 66 69 72 73 74 20 69 6d |ts: "My |first im|
|00004d60| 70 72 65 73 73 69 6f 6e | 20 69 73 20 74 68 61 74 |pression| is that|
|00004d70| 20 74 68 69 73 20 6f 6e | 65 20 69 73 20 62 79 20 | this on|e is by |
|00004d80| 66 61 72 20 74 68 65 20 | 62 65 73 74 20 62 6f 6f |far the |best boo|
|00004d90| 6b 20 6f 6e 20 0d 0a 74 | 68 65 20 74 6f 70 69 63 |k on ..t|he topic|
|00004da0| 2e 20 41 6e 64 20 69 74 | 27 73 20 62 65 6c 6f 77 |. And it|'s below|
|00004db0| 20 24 33 30 20 66 6f 72 | 20 74 68 65 20 70 61 70 | $30 for| the pap|
|00004dc0| 65 72 62 61 63 6b 2e 22 | 3b 20 22 57 65 6c 6c 20 |erback."|; "Well |
|00004dd0| 77 72 69 74 74 65 6e 2c | 20 74 68 65 6f 72 65 74 |written,| theoret|
|00004de0| 69 63 61 6c 0d 0a 28 62 | 75 74 20 6e 6f 74 20 6f |ical..(b|ut not o|
|00004df0| 76 65 72 77 68 65 6c 6d | 69 6e 67 29 22 3b 20 49 |verwhelm|ing)"; I|
|00004e00| 74 20 70 72 6f 76 69 64 | 65 73 20 61 20 67 6f 6f |t provid|es a goo|
|00004e10| 64 20 62 61 6c 61 6e 63 | 65 20 6f 66 20 6d 6f 64 |d balanc|e of mod|
|00004e20| 65 6c 20 64 65 76 65 6c | 6f 70 6d 65 6e 74 2c 20 |el devel|opment, |
|00004e30| 0d 0a 63 6f 6d 70 75 74 | 61 74 69 6f 6e 61 6c 20 |..comput|ational |
|00004e40| 61 6c 67 6f 72 69 74 68 | 6d 73 2c 20 61 6e 64 20 |algorith|ms, and |
|00004e50| 61 70 70 6c 69 63 61 74 | 69 6f 6e 73 2e 20 54 68 |applicat|ions. Th|
|00004e60| 65 20 6d 61 74 68 65 6d | 61 74 69 63 61 6c 20 64 |e mathem|atical d|
|00004e70| 65 72 69 76 61 74 69 6f | 6e 73 20 0d 0a 61 72 65 |erivatio|ns ..are|
|00004e80| 20 65 73 70 65 63 69 61 | 6c 6c 79 20 77 65 6c 6c | especia|lly well|
|00004e90| 20 64 6f 6e 65 22 3b 20 | 22 4e 69 63 65 20 6d 61 | done"; |"Nice ma|
|00004ea0| 74 68 65 6d 61 74 69 63 | 61 6c 20 61 6e 61 6c 79 |thematic|al analy|
|00004eb0| 73 69 73 20 6f 6e 20 74 | 68 65 20 6d 65 63 68 61 |sis on t|he mecha|
|00004ec0| 6e 69 73 6d 20 6f 66 20 | 0d 0a 64 69 66 66 65 72 |nism of |..differ|
|00004ed0| 65 6e 74 20 6c 65 61 72 | 6e 69 6e 67 20 61 6c 67 |ent lear|ning alg|
|00004ee0| 6f 72 69 74 68 6d 73 22 | 3b 20 22 49 74 20 69 73 |orithms"|; "It is|
|00004ef0| 20 4e 4f 54 20 66 6f 72 | 20 6d 61 74 68 65 6d 61 | NOT for| mathema|
|00004f00| 74 69 63 61 6c 20 62 65 | 67 69 6e 6e 65 72 2e 0d |tical be|ginner..|
|00004f10| 0a 49 66 20 79 6f 75 20 | 64 6f 6e 27 74 20 68 61 |.If you |don't ha|
|00004f20| 76 65 20 61 20 67 6f 6f | 64 20 67 72 61 73 70 20 |ve a goo|d grasp |
|00004f30| 6f 66 20 68 69 67 68 65 | 72 20 6c 65 76 65 6c 20 |of highe|r level |
|00004f40| 6d 61 74 68 2c 20 74 68 | 69 73 20 62 6f 6f 6b 20 |math, th|is book |
|00004f50| 63 61 6e 0d 0a 62 65 20 | 72 65 61 6c 6c 79 20 74 |can..be |really t|
|00004f60| 6f 75 67 68 20 74 6f 20 | 67 65 74 20 74 68 72 6f |ough to |get thro|
|00004f70| 75 67 68 2e 22 0d 0a 0d | 0a 0d 0a 31 2e 29 20 42 |ugh."...|...1.) B|
|00004f80| 6f 6f 6b 73 20 66 6f 72 | 20 74 68 65 20 62 65 67 |ooks for| the beg|
|00004f90| 69 6e 6e 65 72 3a 0d 0a | 0d 0a 41 6c 65 6b 73 61 |inner:..|..Aleksa|
|00004fa0| 6e 64 65 72 2c 20 49 2e | 20 61 6e 64 20 4d 6f 72 |nder, I.| and Mor|
|00004fb0| 74 6f 6e 2c 20 48 2e 20 | 28 31 39 39 30 29 2e 20 |ton, H. |(1990). |
|00004fc0| 41 6e 20 49 6e 74 72 6f | 64 75 63 74 69 6f 6e 20 |An Intro|duction |
|00004fd0| 74 6f 20 4e 65 75 72 61 | 6c 20 43 6f 6d 70 75 74 |to Neura|l Comput|
|00004fe0| 69 6e 67 2e 0d 0a 43 68 | 61 70 6d 61 6e 20 61 6e |ing...Ch|apman an|
|00004ff0| 64 20 48 61 6c 6c 2e 20 | 28 49 53 42 4e 20 30 2d |d Hall. |(ISBN 0-|
|00005000| 34 31 32 2d 33 37 37 38 | 30 2d 32 29 2e 0d 0a 43 |412-3778|0-2)...C|
|00005010| 6f 6d 6d 65 6e 74 73 3a | 20 22 54 68 69 73 20 62 |omments:| "This b|
|00005020| 6f 6f 6b 20 73 65 65 6d | 73 20 74 6f 20 62 65 20 |ook seem|s to be |
|00005030| 69 6e 74 65 6e 64 65 64 | 20 66 6f 72 20 74 68 65 |intended| for the|
|00005040| 20 66 69 72 73 74 20 79 | 65 61 72 20 6f 66 20 75 | first y|ear of u|
|00005050| 6e 69 76 65 72 73 69 74 | 79 20 0d 0a 65 64 75 63 |niversit|y ..educ|
|00005060| 61 74 69 6f 6e 2e 22 0d | 0a 0d 0a 42 65 61 6c 65 |ation.".|...Beale|
|00005070| 2c 20 52 2e 20 61 6e 64 | 20 4a 61 63 6b 73 6f 6e |, R. and| Jackson|
|00005080| 2c 20 54 2e 20 28 31 39 | 39 30 29 2e 20 4e 65 75 |, T. (19|90). Neu|
|00005090| 72 61 6c 20 43 6f 6d 70 | 75 74 69 6e 67 2c 20 61 |ral Comp|uting, a|
|000050a0| 6e 20 49 6e 74 72 6f 64 | 75 63 74 69 6f 6e 2e 0d |n Introd|uction..|
|000050b0| 0a 41 64 61 6d 20 48 69 | 6c 67 65 72 2c 20 49 4f |.Adam Hi|lger, IO|
|000050c0| 50 20 50 75 62 6c 69 73 | 68 69 6e 67 20 4c 74 64 |P Publis|hing Ltd|
|000050d0| 20 3a 20 42 72 69 73 74 | 6f 6c 2e 20 28 49 53 42 | : Brist|ol. (ISB|
|000050e0| 4e 20 30 2d 38 35 32 37 | 34 2d 32 36 32 2d 32 29 |N 0-8527|4-262-2)|
|000050f0| 2e 0d 0a 43 6f 6d 6d 65 | 6e 74 73 3a 20 22 49 74 |...Comme|nts: "It|
|00005100| 27 73 20 63 6c 65 61 72 | 6c 79 20 77 72 69 74 74 |'s clear|ly writt|
|00005110| 65 6e 2e 20 20 4c 6f 74 | 73 20 6f 66 20 68 69 6e |en. Lot|s of hin|
|00005120| 74 73 20 61 73 20 74 6f | 20 68 6f 77 20 74 6f 20 |ts as to| how to |
|00005130| 67 65 74 20 74 68 65 0d | 0a 61 64 61 70 74 69 76 |get the.|.adaptiv|
|00005140| 65 20 6d 6f 64 65 6c 73 | 20 63 6f 76 65 72 65 64 |e models| covered|
|00005150| 20 74 6f 20 77 6f 72 6b | 20 28 6e 6f 74 20 61 6c | to work| (not al|
|00005160| 77 61 79 73 20 77 65 6c | 6c 20 65 78 70 6c 61 69 |ways wel|l explai|
|00005170| 6e 65 64 20 69 6e 20 74 | 68 65 0d 0a 6f 72 69 67 |ned in t|he..orig|
|00005180| 69 6e 61 6c 20 73 6f 75 | 72 63 65 73 29 2e 20 20 |inal sou|rces). |
|00005190| 43 6f 6e 73 69 73 74 65 | 6e 74 20 6d 61 74 68 65 |Consiste|nt mathe|
|000051a0| 6d 61 74 69 63 61 6c 20 | 74 65 72 6d 69 6e 6f 6c |matical |terminol|
|000051b0| 6f 67 79 2e 20 20 43 6f | 76 65 72 73 0d 0a 70 65 |ogy. Co|vers..pe|
|000051c0| 72 63 65 70 74 72 6f 6e | 73 2c 20 65 72 72 6f 72 |rceptron|s, error|
|000051d0| 2d 62 61 63 6b 70 72 6f | 70 61 67 61 74 69 6f 6e |-backpro|pagation|
|000051e0| 2c 20 4b 6f 68 6f 6e 65 | 6e 20 73 65 6c 66 2d 6f |, Kohone|n self-o|
|000051f0| 72 67 20 6d 6f 64 65 6c | 2c 20 48 6f 70 66 69 65 |rg model|, Hopfie|
|00005200| 6c 64 0d 0a 74 79 70 65 | 20 6d 6f 64 65 6c 73 2c |ld..type| models,|
|00005210| 20 41 52 54 2c 20 61 6e | 64 20 61 73 73 6f 63 69 | ART, an|d associ|
|00005220| 61 74 69 76 65 20 6d 65 | 6d 6f 72 69 65 73 2e 22 |ative me|mories."|
|00005230| 0d 0a 0d 0a 44 61 79 68 | 6f 66 66 2c 20 4a 2e 20 |....Dayh|off, J. |
|00005240| 45 2e 20 28 31 39 39 30 | 29 2e 20 4e 65 75 72 61 |E. (1990|). Neura|
|00005250| 6c 20 4e 65 74 77 6f 72 | 6b 20 41 72 63 68 69 74 |l Networ|k Archit|
|00005260| 65 63 74 75 72 65 73 3a | 20 41 6e 20 49 6e 74 72 |ectures:| An Intr|
|00005270| 6f 64 75 63 74 69 6f 6e | 2e 0d 0a 56 61 6e 20 4e |oduction|...Van N|
|00005280| 6f 73 74 72 61 6e 64 20 | 52 65 69 6e 68 6f 6c 64 |ostrand |Reinhold|
|00005290| 3a 20 4e 65 77 20 59 6f | 72 6b 2e 0d 0a 43 6f 6d |: New Yo|rk...Com|
|000052a0| 6d 65 6e 74 73 3a 20 22 | 4c 69 6b 65 20 57 61 73 |ments: "|Like Was|
|000052b0| 73 65 72 6d 61 6e 27 73 | 20 62 6f 6f 6b 2c 20 44 |serman's| book, D|
|000052c0| 61 79 68 6f 66 66 27 73 | 20 62 6f 6f 6b 20 69 73 |ayhoff's| book is|
|000052d0| 20 61 6c 73 6f 20 76 65 | 72 79 20 65 61 73 79 20 | also ve|ry easy |
|000052e0| 74 6f 20 0d 0a 75 6e 64 | 65 72 73 74 61 6e 64 22 |to ..und|erstand"|
|000052f0| 2e 0d 0a 0d 0a 4d 63 43 | 6c 65 6c 6c 61 6e 64 2c |.....McC|lelland,|
|00005300| 20 4a 2e 20 4c 2e 20 61 | 6e 64 20 52 75 6d 65 6c | J. L. a|nd Rumel|
|00005310| 68 61 72 74 2c 20 44 2e | 20 45 2e 20 28 31 39 38 |hart, D.| E. (198|
|00005320| 38 29 2e 0d 0a 45 78 70 | 6c 6f 72 61 74 69 6f 6e |8)...Exp|loration|
|00005330| 73 20 69 6e 20 50 61 72 | 61 6c 6c 65 6c 20 44 69 |s in Par|allel Di|
|00005340| 73 74 72 69 62 75 74 65 | 64 20 50 72 6f 63 65 73 |stribute|d Proces|
|00005350| 73 69 6e 67 3a 20 43 6f | 6d 70 75 74 61 74 69 6f |sing: Co|mputatio|
|00005360| 6e 61 6c 20 4d 6f 64 65 | 6c 73 20 6f 66 20 0d 0a |nal Mode|ls of ..|
|00005370| 43 6f 67 6e 69 74 69 6f | 6e 20 61 6e 64 20 50 65 |Cognitio|n and Pe|
|00005380| 72 63 65 70 74 69 6f 6e | 20 28 73 6f 66 74 77 61 |rception| (softwa|
|00005390| 72 65 20 6d 61 6e 75 61 | 6c 29 2e 20 54 68 65 20 |re manua|l). The |
|000053a0| 4d 49 54 20 50 72 65 73 | 73 2e 0d 0a 43 6f 6d 6d |MIT Pres|s...Comm|
|000053b0| 65 6e 74 73 3a 20 22 57 | 72 69 74 74 65 6e 20 69 |ents: "W|ritten i|
|000053c0| 6e 20 61 20 74 75 74 6f | 72 69 61 6c 20 73 74 79 |n a tuto|rial sty|
|000053d0| 6c 65 2c 20 61 6e 64 20 | 69 6e 63 6c 75 64 65 73 |le, and |includes|
|000053e0| 20 32 20 64 69 73 6b 65 | 74 74 65 73 20 6f 66 20 | 2 diske|ttes of |
|000053f0| 4e 4e 20 0d 0a 73 69 6d | 75 6c 61 74 69 6f 6e 20 |NN ..sim|ulation |
|00005400| 70 72 6f 67 72 61 6d 73 | 20 74 68 61 74 20 63 61 |programs| that ca|
|00005410| 6e 20 62 65 20 63 6f 6d | 70 69 6c 65 64 20 6f 6e |n be com|piled on|
|00005420| 20 4d 53 2d 44 4f 53 20 | 6f 72 20 55 6e 69 78 20 | MS-DOS |or Unix |
|00005430| 28 61 6e 64 20 74 68 65 | 79 20 64 6f 20 0d 0a 74 |(and the|y do ..t|
|00005440| 6f 6f 20 21 29 22 3b 20 | 22 54 68 65 20 70 72 6f |oo !)"; |"The pro|
|00005450| 67 72 61 6d 73 20 61 72 | 65 20 70 72 65 74 74 79 |grams ar|e pretty|
|00005460| 20 72 65 61 73 6f 6e 61 | 62 6c 65 20 61 73 20 61 | reasona|ble as a|
|00005470| 6e 20 69 6e 74 72 6f 64 | 75 63 74 69 6f 6e 20 74 |n introd|uction t|
|00005480| 6f 20 73 6f 6d 65 20 0d | 0a 6f 66 20 74 68 65 20 |o some .|.of the |
|00005490| 74 68 69 6e 67 73 20 74 | 68 61 74 20 4e 4e 73 20 |things t|hat NNs |
|000054a0| 63 61 6e 20 64 6f 2e 22 | 3b 20 22 54 68 65 72 65 |can do."|; "There|
|000054b0| 20 61 72 65 20 2a 74 77 | 6f 2a 20 65 64 69 74 69 | are *tw|o* editi|
|000054c0| 6f 6e 73 20 6f 66 20 74 | 68 69 73 20 62 6f 6f 6b |ons of t|his book|
|000054d0| 2e 20 20 0d 0a 4f 6e 65 | 20 63 6f 6d 65 73 20 77 |. ..One| comes w|
|000054e0| 69 74 68 20 64 69 73 6b | 73 20 66 6f 72 20 74 68 |ith disk|s for th|
|000054f0| 65 20 49 42 4d 20 50 43 | 2c 20 74 68 65 20 6f 74 |e IBM PC|, the ot|
|00005500| 68 65 72 20 63 6f 6d 65 | 73 20 77 69 74 68 20 64 |her come|s with d|
|00005510| 69 73 6b 73 20 66 6f 72 | 20 74 68 65 20 0d 0a 4d |isks for| the ..M|
|00005520| 61 63 69 6e 74 6f 73 68 | 22 2e 0d 0a 0d 0a 4d 63 |acintosh|".....Mc|
|00005530| 43 6f 72 64 20 4e 65 6c | 73 6f 6e 2c 20 4d 2e 20 |Cord Nel|son, M. |
|00005540| 61 6e 64 20 49 6c 6c 69 | 6e 67 77 6f 72 74 68 2c |and Illi|ngworth,|
|00005550| 20 57 2e 54 2e 20 28 31 | 39 39 30 29 2e 20 41 20 | W.T. (1|990). A |
|00005560| 50 72 61 63 74 69 63 61 | 6c 20 47 75 69 64 65 20 |Practica|l Guide |
|00005570| 74 6f 20 4e 65 75 72 61 | 6c 20 0d 0a 4e 65 74 73 |to Neura|l ..Nets|
|00005580| 2e 20 41 64 64 69 73 6f | 6e 2d 57 65 73 6c 65 79 |. Addiso|n-Wesley|
|00005590| 20 50 75 62 6c 69 73 68 | 69 6e 67 20 43 6f 6d 70 | Publish|ing Comp|
|000055a0| 61 6e 79 2c 20 49 6e 63 | 2e 20 28 49 53 42 4e 20 |any, Inc|. (ISBN |
|000055b0| 30 2d 32 30 31 2d 35 32 | 33 37 36 2d 30 29 2e 0d |0-201-52|376-0)..|
|000055c0| 0a 43 6f 6d 6d 65 6e 74 | 73 3a 20 22 4e 6f 20 66 |.Comment|s: "No f|
|000055d0| 6f 72 6d 75 6c 61 73 20 | 61 74 20 61 6c 6c 28 20 |ormulas |at all( |
|000055e0| 3d 3d 3e 20 6e 6f 20 67 | 6f 6f 64 29 22 3b 20 22 |==> no g|ood)"; "|
|000055f0| 49 74 20 64 6f 65 73 20 | 6e 6f 74 20 68 61 76 65 |It does |not have|
|00005600| 20 6d 75 63 68 20 0d 0a | 64 65 74 61 69 6c 65 64 | much ..|detailed|
|00005610| 20 6d 6f 64 65 6c 20 64 | 65 76 65 6c 6f 70 6d 65 | model d|evelopme|
|00005620| 6e 74 20 28 76 65 72 79 | 20 66 65 77 20 65 71 75 |nt (very| few equ|
|00005630| 61 74 69 6f 6e 73 29 2c | 20 62 75 74 20 69 74 20 |ations),| but it |
|00005640| 64 6f 65 73 20 70 72 65 | 73 65 6e 74 20 6d 61 6e |does pre|sent man|
|00005650| 79 20 0d 0a 61 72 65 61 | 73 20 6f 66 20 61 70 70 |y ..area|s of app|
|00005660| 6c 69 63 61 74 69 6f 6e | 2e 20 20 49 74 20 69 6e |lication|. It in|
|00005670| 63 6c 75 64 65 73 20 61 | 20 63 68 61 70 74 65 72 |cludes a| chapter|
|00005680| 20 6f 6e 20 63 75 72 72 | 65 6e 74 20 61 72 65 61 | on curr|ent area|
|00005690| 73 20 6f 66 20 72 65 73 | 65 61 72 63 68 2e 20 0d |s of res|earch. .|
|000056a0| 0a 41 20 76 61 72 69 65 | 74 79 20 6f 66 20 63 6f |.A varie|ty of co|
|000056b0| 6d 6d 65 72 63 69 61 6c | 20 61 70 70 6c 69 63 61 |mmercial| applica|
|000056c0| 74 69 6f 6e 73 20 69 73 | 20 64 69 73 63 75 73 73 |tions is| discuss|
|000056d0| 65 64 20 69 6e 20 63 68 | 61 70 74 65 72 20 31 2e |ed in ch|apter 1.|
|000056e0| 20 20 49 74 20 61 6c 73 | 6f 20 0d 0a 69 6e 63 6c | It als|o ..incl|
|000056f0| 75 64 65 73 20 61 20 70 | 72 6f 67 72 61 6d 20 64 |udes a p|rogram d|
|00005700| 69 73 6b 65 74 74 65 20 | 77 69 74 68 20 61 20 66 |iskette |with a f|
|00005710| 61 6e 63 79 20 67 72 61 | 70 68 69 63 61 6c 20 69 |ancy gra|phical i|
|00005720| 6e 74 65 72 66 61 63 65 | 20 28 75 6e 6c 69 6b 65 |nterface| (unlike|
|00005730| 20 74 68 65 20 0d 0a 50 | 44 50 20 64 69 73 6b 65 | the ..P|DP diske|
|00005740| 74 74 65 29 22 2e 0d 0a | 0d 0a 4f 72 63 68 61 72 |tte)"...|..Orchar|
|00005750| 64 2c 20 47 2e 41 2e 20 | 26 20 50 68 69 6c 6c 69 |d, G.A. |& Philli|
|00005760| 70 73 2c 20 57 2e 41 2e | 20 28 31 39 39 31 29 2e |ps, W.A.| (1991).|
|00005770| 20 4e 65 75 72 61 6c 20 | 43 6f 6d 70 75 74 61 74 | Neural |Computat|
|00005780| 69 6f 6e 3a 20 41 0d 0a | 42 65 67 69 6e 6e 65 72 |ion: A..|Beginner|
|00005790| 27 73 20 47 75 69 64 65 | 2e 20 4c 61 77 72 65 6e |'s Guide|. Lawren|
|000057a0| 63 65 20 45 61 72 6c 62 | 61 75 6d 20 41 73 73 6f |ce Earlb|aum Asso|
|000057b0| 63 69 61 74 65 73 3a 20 | 4c 6f 6e 64 6f 6e 2e 0d |ciates: |London..|
|000057c0| 0a 43 6f 6d 6d 65 6e 74 | 73 3a 20 22 53 68 6f 72 |.Comment|s: "Shor|
|000057d0| 74 20 75 73 65 72 2d 66 | 72 69 65 6e 64 6c 79 20 |t user-f|riendly |
|000057e0| 69 6e 74 72 6f 64 75 63 | 74 69 6f 6e 20 74 6f 20 |introduc|tion to |
|000057f0| 74 68 65 20 61 72 65 61 | 2c 20 77 69 74 68 20 61 |the area|, with a|
|00005800| 20 0d 0a 6e 6f 6e 2d 74 | 65 63 68 6e 69 63 61 6c | ..non-t|echnical|
|00005810| 20 66 6c 61 76 6f 75 72 | 2e 20 41 70 70 61 72 65 | flavour|. Appare|
|00005820| 6e 74 6c 79 20 61 63 63 | 6f 6d 70 61 6e 69 65 73 |ntly acc|ompanies|
|00005830| 20 61 20 73 6f 66 74 77 | 61 72 65 20 70 61 63 6b | a softw|are pack|
|00005840| 61 67 65 2c 20 62 75 74 | 20 49 20 0d 0a 68 61 76 |age, but| I ..hav|
|00005850| 65 6e 27 74 20 73 65 65 | 6e 20 74 68 61 74 20 79 |en't see|n that y|
|00005860| 65 74 22 2e 0d 0a 0d 0a | 57 61 73 73 65 72 6d 61 |et".....|Wasserma|
|00005870| 6e 2c 20 50 2e 20 44 2e | 20 28 31 39 38 39 29 2e |n, P. D.| (1989).|
|00005880| 20 4e 65 75 72 61 6c 20 | 43 6f 6d 70 75 74 69 6e | Neural |Computin|
|00005890| 67 3a 20 54 68 65 6f 72 | 79 20 26 20 50 72 61 63 |g: Theor|y & Prac|
|000058a0| 74 69 63 65 2e 0d 0a 56 | 61 6e 20 4e 6f 73 74 72 |tice...V|an Nostr|
|000058b0| 61 6e 64 20 52 65 69 6e | 68 6f 6c 64 3a 20 4e 65 |and Rein|hold: Ne|
|000058c0| 77 20 59 6f 72 6b 2e 20 | 28 49 53 42 4e 20 30 2d |w York. |(ISBN 0-|
|000058d0| 34 34 32 2d 32 30 37 34 | 33 2d 33 29 0d 0a 43 6f |442-2074|3-3)..Co|
|000058e0| 6d 6d 65 6e 74 73 3a 20 | 22 57 61 73 73 65 72 6d |mments: |"Wasserm|
|000058f0| 61 6e 20 66 6c 61 74 6c | 79 20 65 6e 75 6d 65 72 |an flatl|y enumer|
|00005900| 61 74 65 73 20 73 6f 6d | 65 20 63 6f 6d 6d 6f 6e |ates som|e common|
|00005910| 20 61 72 63 68 69 74 65 | 63 74 75 72 65 73 20 66 | archite|ctures f|
|00005920| 72 6f 6d 20 61 6e 20 0d | 0a 65 6e 67 69 6e 65 65 |rom an .|.enginee|
|00005930| 72 27 73 20 70 65 72 73 | 70 65 63 74 69 76 65 20 |r's pers|pective |
|00005940| 28 27 68 6f 77 20 69 74 | 20 77 6f 72 6b 73 27 29 |('how it| works')|
|00005950| 20 77 69 74 68 6f 75 74 | 20 65 76 65 72 20 61 64 | without| ever ad|
|00005960| 64 72 65 73 73 69 6e 67 | 20 74 68 65 20 75 6e 64 |dressing| the und|
|00005970| 65 72 6c 79 69 6e 67 20 | 0d 0a 66 75 6e 64 61 6d |erlying |..fundam|
|00005980| 65 6e 74 61 6c 73 20 28 | 27 77 68 79 20 69 74 20 |entals (|'why it |
|00005990| 77 6f 72 6b 73 27 29 20 | 2d 20 69 6d 70 6f 72 74 |works') |- import|
|000059a0| 61 6e 74 20 62 61 73 69 | 63 20 63 6f 6e 63 65 70 |ant basi|c concep|
|000059b0| 74 73 20 73 75 63 68 20 | 61 73 20 63 6c 75 73 74 |ts such |as clust|
|000059c0| 65 72 69 6e 67 2c 20 0d | 0a 70 72 69 6e 63 69 70 |ering, .|.princip|
|000059d0| 61 6c 20 63 6f 6d 70 6f | 6e 65 6e 74 73 20 6f 72 |al compo|nents or|
|000059e0| 20 67 72 61 64 69 65 6e | 74 20 64 65 73 63 65 6e | gradien|t descen|
|000059f0| 74 20 61 72 65 20 6e 6f | 74 20 74 72 65 61 74 65 |t are no|t treate|
|00005a00| 64 2e 20 20 49 74 27 73 | 20 61 6c 73 6f 20 66 75 |d. It's| also fu|
|00005a10| 6c 6c 20 6f 66 20 0d 0a | 65 72 72 6f 72 73 2c 20 |ll of ..|errors, |
|00005a20| 61 6e 64 20 75 6e 68 65 | 6c 70 66 75 6c 20 64 69 |and unhe|lpful di|
|00005a30| 61 67 72 61 6d 73 20 64 | 72 61 77 6e 20 77 69 74 |agrams d|rawn wit|
|00005a40| 68 20 77 68 61 74 20 61 | 70 70 65 61 72 73 20 74 |h what a|ppears t|
|00005a50| 6f 20 62 65 20 50 43 42 | 20 62 6f 61 72 64 20 6c |o be PCB| board l|
|00005a60| 61 79 6f 75 74 20 0d 0a | 73 6f 66 74 77 61 72 65 |ayout ..|software|
|00005a70| 20 66 72 6f 6d 20 74 68 | 65 20 27 37 30 73 2e 20 | from th|e '70s. |
|00005a80| 46 6f 72 20 61 6e 79 6f | 6e 65 20 77 68 6f 20 77 |For anyo|ne who w|
|00005a90| 61 6e 74 73 20 74 6f 20 | 64 6f 20 61 63 74 69 76 |ants to |do activ|
|00005aa0| 65 20 72 65 73 65 61 72 | 63 68 20 69 6e 20 74 68 |e resear|ch in th|
|00005ab0| 65 0d 0a 66 69 65 6c 64 | 20 49 20 63 6f 6e 73 69 |e..field| I consi|
|00005ac0| 64 65 72 20 69 74 20 71 | 75 69 74 65 20 69 6e 61 |der it q|uite ina|
|00005ad0| 64 65 71 75 61 74 65 22 | 3b 20 22 4f 6b 61 79 2c |dequate"|; "Okay,|
|00005ae0| 20 62 75 74 20 74 6f 6f | 20 73 68 61 6c 6c 6f 77 | but too| shallow|
|00005af0| 22 3b 20 22 51 75 69 74 | 65 0d 0a 65 61 73 79 20 |"; "Quit|e..easy |
|00005b00| 74 6f 20 75 6e 64 65 72 | 73 74 61 6e 64 22 3b 0d |to under|stand";.|
|00005b10| 0a 22 54 68 65 20 62 65 | 73 74 20 62 65 64 74 69 |."The be|st bedti|
|00005b20| 6d 65 20 72 65 61 64 69 | 6e 67 20 66 6f 72 20 4e |me readi|ng for N|
|00005b30| 65 75 72 61 6c 20 4e 65 | 74 77 6f 72 6b 73 2e 20 |eural Ne|tworks. |
|00005b40| 20 49 20 68 61 76 65 20 | 67 69 76 65 6e 0d 0a 74 | I have |given..t|
|00005b50| 68 69 73 20 62 6f 6f 6b | 20 74 6f 20 6e 75 6d 65 |his book| to nume|
|00005b60| 72 6f 75 73 20 63 6f 6c | 6c 65 67 75 65 73 20 77 |rous col|legues w|
|00005b70| 68 6f 20 77 61 6e 74 20 | 74 6f 20 6b 6e 6f 77 20 |ho want |to know |
|00005b80| 4e 4e 20 62 61 73 69 63 | 73 2c 20 62 75 74 20 77 |NN basic|s, but w|
|00005b90| 68 6f 20 6e 65 76 65 72 | 0d 0a 70 6c 61 6e 20 74 |ho never|..plan t|
|00005ba0| 6f 20 69 6d 70 6c 65 6d | 65 6e 74 20 61 6e 79 74 |o implem|ent anyt|
|00005bb0| 68 69 6e 67 2e 20 20 41 | 6e 20 65 78 63 65 6c 6c |hing. A|n excell|
|00005bc0| 65 6e 74 20 62 6f 6f 6b | 20 74 6f 20 67 69 76 65 |ent book| to give|
|00005bd0| 20 79 6f 75 72 20 6d 61 | 6e 61 67 65 72 2e 22 0d | your ma|nager.".|
|00005be0| 0a 0d 0a 0d 0a 32 2e 29 | 20 54 68 65 20 63 6c 61 |.....2.)| The cla|
|00005bf0| 73 73 69 63 73 3a 0d 0a | 0d 0a 4b 6f 68 6f 6e 65 |ssics:..|..Kohone|
|00005c00| 6e 2c 20 54 2e 20 28 31 | 39 38 34 29 2e 20 53 65 |n, T. (1|984). Se|
|00005c10| 6c 66 2d 6f 72 67 61 6e | 69 7a 61 74 69 6f 6e 20 |lf-organ|ization |
|00005c20| 61 6e 64 20 41 73 73 6f | 63 69 61 74 69 76 65 20 |and Asso|ciative |
|00005c30| 4d 65 6d 6f 72 79 2e 20 | 53 70 72 69 6e 67 65 72 |Memory. |Springer|
|00005c40| 2d 56 65 72 6c 61 67 3a | 0d 0a 4e 65 77 20 59 6f |-Verlag:|..New Yo|
|00005c50| 72 6b 2e 20 28 32 6e 64 | 20 45 64 69 74 69 6f 6e |rk. (2nd| Edition|
|00005c60| 3a 20 31 39 38 38 3b 20 | 33 72 64 20 65 64 69 74 |: 1988; |3rd edit|
|00005c70| 69 6f 6e 3a 20 31 39 38 | 39 29 2e 20 0d 0a 43 6f |ion: 198|9). ..Co|
|00005c80| 6d 6d 65 6e 74 73 3a 20 | 22 54 68 65 20 73 65 63 |mments: |"The sec|
|00005c90| 74 69 6f 6e 20 6f 6e 20 | 50 61 74 74 65 72 6e 20 |tion on |Pattern |
|00005ca0| 6d 61 74 68 65 6d 61 74 | 69 63 73 20 69 73 20 65 |mathemat|ics is e|
|00005cb0| 78 63 65 6c 6c 65 6e 74 | 2e 22 0d 0a 0d 0a 52 75 |xcellent|."....Ru|
|00005cc0| 6d 65 6c 68 61 72 74 2c | 20 44 2e 20 45 2e 20 61 |melhart,| D. E. a|
|00005cd0| 6e 64 20 4d 63 43 6c 65 | 6c 6c 61 6e 64 2c 20 4a |nd McCle|lland, J|
|00005ce0| 2e 20 4c 2e 20 28 31 39 | 38 36 29 2e 20 50 61 72 |. L. (19|86). Par|
|00005cf0| 61 6c 6c 65 6c 20 44 69 | 73 74 72 69 62 75 74 65 |allel Di|stribute|
|00005d00| 64 20 0d 0a 50 72 6f 63 | 65 73 73 69 6e 67 3a 20 |d ..Proc|essing: |
|00005d10| 45 78 70 6c 6f 72 61 74 | 69 6f 6e 73 20 69 6e 20 |Explorat|ions in |
|00005d20| 74 68 65 20 4d 69 63 72 | 6f 73 74 72 75 63 74 75 |the Micr|ostructu|
|00005d30| 72 65 20 6f 66 20 43 6f | 67 6e 69 74 69 6f 6e 20 |re of Co|gnition |
|00005d40| 28 76 6f 6c 75 6d 65 73 | 20 31 20 26 20 32 29 2e |(volumes| 1 & 2).|
|00005d50| 20 0d 0a 54 68 65 20 4d | 49 54 20 50 72 65 73 73 | ..The M|IT Press|
|00005d60| 2e 20 0d 0a 43 6f 6d 6d | 65 6e 74 73 3a 20 22 41 |. ..Comm|ents: "A|
|00005d70| 73 20 61 20 63 6f 6d 70 | 75 74 65 72 20 73 63 69 |s a comp|uter sci|
|00005d80| 65 6e 74 69 73 74 20 49 | 20 66 6f 75 6e 64 20 74 |entist I| found t|
|00005d90| 68 65 20 74 77 6f 20 52 | 75 6d 65 6c 68 61 72 74 |he two R|umelhart|
|00005da0| 20 61 6e 64 20 4d 63 43 | 6c 65 6c 6c 61 6e 64 20 | and McC|lelland |
|00005db0| 0d 0a 62 6f 6f 6b 73 20 | 72 65 61 6c 6c 79 20 68 |..books |really h|
|00005dc0| 65 61 76 79 20 67 6f 69 | 6e 67 20 61 6e 64 20 64 |eavy goi|ng and d|
|00005dd0| 65 66 69 6e 69 74 65 6c | 79 20 6e 6f 74 20 74 68 |efinitel|y not th|
|00005de0| 65 20 73 6f 72 74 20 6f | 66 20 74 68 69 6e 67 20 |e sort o|f thing |
|00005df0| 74 6f 20 72 65 61 64 20 | 69 66 20 79 6f 75 20 0d |to read |if you .|
|00005e00| 0a 61 72 65 20 61 20 62 | 65 67 69 6e 6e 65 72 2e |.are a b|eginner.|
|00005e10| 22 3b 20 22 49 74 27 73 | 20 71 75 69 74 65 20 72 |"; "It's| quite r|
|00005e20| 65 61 64 61 62 6c 65 2c | 20 61 6e 64 20 61 66 66 |eadable,| and aff|
|00005e30| 6f 72 64 61 62 6c 65 20 | 28 61 62 6f 75 74 20 24 |ordable |(about $|
|00005e40| 36 35 20 66 6f 72 20 62 | 6f 74 68 20 0d 0a 76 6f |65 for b|oth ..vo|
|00005e50| 6c 75 6d 65 73 29 2e 22 | 3b 20 22 54 48 45 20 43 |lumes)."|; "THE C|
|00005e60| 6f 6e 6e 65 63 74 69 6f | 6e 69 73 74 20 62 69 62 |onnectio|nist bib|
|00005e70| 6c 65 2e 22 2e 0d 0a 0d | 0a 0d 0a 33 2e 29 20 49 |le."....|...3.) I|
|00005e80| 6e 74 72 6f 64 75 63 74 | 6f 72 79 20 6a 6f 75 72 |ntroduct|ory jour|
|00005e90| 6e 61 6c 20 61 72 74 69 | 63 6c 65 73 3a 0d 0a 0d |nal arti|cles:...|
|00005ea0| 0a 48 69 6e 74 6f 6e 2c | 20 47 2e 20 45 2e 20 28 |.Hinton,| G. E. (|
|00005eb0| 31 39 38 39 29 2e 20 43 | 6f 6e 6e 65 63 74 69 6f |1989). C|onnectio|
|00005ec0| 6e 69 73 74 20 6c 65 61 | 72 6e 69 6e 67 20 70 72 |nist lea|rning pr|
|00005ed0| 6f 63 65 64 75 72 65 73 | 2e 0d 0a 41 72 74 69 66 |ocedures|...Artif|
|00005ee0| 69 63 69 61 6c 20 49 6e | 74 65 6c 6c 69 67 65 6e |icial In|telligen|
|00005ef0| 63 65 2c 20 56 6f 6c 2e | 20 34 30 2c 20 70 70 2e |ce, Vol.| 40, pp.|
|00005f00| 20 31 38 35 2d 2d 32 33 | 34 2e 0d 0a 43 6f 6d 6d | 185--23|4...Comm|
|00005f10| 65 6e 74 73 3a 20 22 4f | 6e 65 20 6f 66 20 74 68 |ents: "O|ne of th|
|00005f20| 65 20 62 65 74 74 65 72 | 20 6e 65 75 72 61 6c 20 |e better| neural |
|00005f30| 6e 65 74 77 6f 72 6b 73 | 20 6f 76 65 72 76 69 65 |networks| overvie|
|00005f40| 77 20 70 61 70 65 72 73 | 2c 20 61 6c 74 68 6f 75 |w papers|, althou|
|00005f50| 67 68 20 74 68 65 0d 0a | 64 69 73 74 69 6e 63 74 |gh the..|distinct|
|00005f60| 69 6f 6e 20 62 65 74 77 | 65 65 6e 20 6e 65 74 77 |ion betw|een netw|
|00005f70| 6f 72 6b 20 74 6f 70 6f | 6c 6f 67 79 20 61 6e 64 |ork topo|logy and|
|00005f80| 20 6c 65 61 72 6e 69 6e | 67 20 61 6c 67 6f 72 69 | learnin|g algori|
|00005f90| 74 68 6d 20 69 73 20 6e | 6f 74 20 61 6c 77 61 79 |thm is n|ot alway|
|00005fa0| 73 0d 0a 76 65 72 79 20 | 63 6c 65 61 72 2e 20 20 |s..very |clear. |
|00005fb0| 43 6f 75 6c 64 20 76 65 | 72 79 20 77 65 6c 6c 20 |Could ve|ry well |
|00005fc0| 62 65 20 75 73 65 64 20 | 61 73 20 61 6e 20 69 6e |be used |as an in|
|00005fd0| 74 72 6f 64 75 63 74 69 | 6f 6e 20 74 6f 20 6e 65 |troducti|on to ne|
|00005fe0| 75 72 61 6c 20 6e 65 74 | 77 6f 72 6b 73 2e 22 0d |ural net|works.".|
|00005ff0| 0a 0d 0a 4b 6e 69 67 68 | 74 2c 20 4b 2e 20 28 31 |...Knigh|t, K. (1|
|00006000| 39 39 30 29 2e 20 43 6f | 6e 6e 65 63 74 69 6f 6e |990). Co|nnection|
|00006010| 69 73 74 2c 20 49 64 65 | 61 73 20 61 6e 64 20 41 |ist, Ide|as and A|
|00006020| 6c 67 6f 72 69 74 68 6d | 73 2e 20 43 6f 6d 6d 75 |lgorithm|s. Commu|
|00006030| 6e 69 63 61 74 69 6f 6e | 73 20 6f 66 20 0d 0a 74 |nication|s of ..t|
|00006040| 68 65 20 41 43 4d 2e 20 | 4e 6f 76 65 6d 62 65 72 |he ACM. |November|
|00006050| 20 31 39 39 30 2e 20 56 | 6f 6c 2e 33 33 20 6e 72 | 1990. V|ol.33 nr|
|00006060| 2e 31 31 2c 20 70 70 20 | 35 39 2d 37 34 2e 0d 0a |.11, pp |59-74...|
|00006070| 43 6f 6d 6d 65 6e 74 73 | 3a 22 41 20 67 6f 6f 64 |Comments|:"A good|
|00006080| 20 61 72 74 69 63 6c 65 | 2c 20 77 68 69 6c 65 20 | article|, while |
|00006090| 69 74 20 69 73 20 66 6f | 72 20 6d 6f 73 74 20 70 |it is fo|r most p|
|000060a0| 65 6f 70 6c 65 20 65 61 | 73 79 20 74 6f 20 66 69 |eople ea|sy to fi|
|000060b0| 6e 64 20 61 20 63 6f 70 | 79 20 6f 66 0d 0a 74 68 |nd a cop|y of..th|
|000060c0| 69 73 20 6a 6f 75 72 6e | 61 6c 2e 22 0d 0a 0d 0a |is journ|al."....|
|000060d0| 4b 6f 68 6f 6e 65 6e 2c | 20 54 2e 20 28 31 39 38 |Kohonen,| T. (198|
|000060e0| 38 29 2e 20 41 6e 20 49 | 6e 74 72 6f 64 75 63 74 |8). An I|ntroduct|
|000060f0| 69 6f 6e 20 74 6f 20 4e | 65 75 72 61 6c 20 43 6f |ion to N|eural Co|
|00006100| 6d 70 75 74 69 6e 67 2e | 20 4e 65 75 72 61 6c 20 |mputing.| Neural |
|00006110| 4e 65 74 77 6f 72 6b 73 | 2c 0d 0a 76 6f 6c 2e 20 |Networks|,..vol. |
|00006120| 31 2c 20 6e 6f 2e 20 31 | 2e 20 70 70 2e 20 33 2d |1, no. 1|. pp. 3-|
|00006130| 31 36 2e 0d 0a 43 6f 6d | 6d 65 6e 74 73 3a 20 22 |16...Com|ments: "|
|00006140| 41 20 67 65 6e 65 72 61 | 6c 20 72 65 76 69 65 77 |A genera|l review|
|00006150| 22 2e 0d 0a 0d 0a 0d 0a | 34 2e 29 20 4e 6f 74 2d |".......|4.) Not-|
|00006160| 71 75 69 74 65 2d 73 6f | 2d 69 6e 74 72 6f 64 75 |quite-so|-introdu|
|00006170| 63 74 6f 72 79 20 6c 69 | 74 65 72 61 74 75 72 65 |ctory li|terature|
|00006180| 3a 0d 0a 0d 0a 41 6e 64 | 65 72 73 6f 6e 2c 20 4a |:....And|erson, J|
|00006190| 2e 20 41 2e 20 61 6e 64 | 20 52 6f 73 65 6e 66 65 |. A. and| Rosenfe|
|000061a0| 6c 64 2c 20 45 2e 20 28 | 45 64 73 29 2e 20 28 31 |ld, E. (|Eds). (1|
|000061b0| 39 38 38 29 2e 20 4e 65 | 75 72 6f 63 6f 6d 70 75 |988). Ne|urocompu|
|000061c0| 74 69 6e 67 3a 20 0d 0a | 46 6f 75 6e 64 61 74 69 |ting: ..|Foundati|
|000061d0| 6f 6e 73 20 6f 66 20 52 | 65 73 65 61 72 63 68 2e |ons of R|esearch.|
|000061e0| 20 54 68 65 20 4d 49 54 | 20 50 72 65 73 73 3a 20 | The MIT| Press: |
|000061f0| 43 61 6d 62 72 69 64 67 | 65 2c 20 4d 41 2e 0d 0a |Cambridg|e, MA...|
|00006200| 43 6f 6d 6d 65 6e 74 73 | 3a 20 22 41 6e 20 65 78 |Comments|: "An ex|
|00006210| 70 65 6e 73 69 76 65 20 | 62 6f 6f 6b 2c 20 62 75 |pensive |book, bu|
|00006220| 74 20 65 78 63 65 6c 6c | 65 6e 74 20 66 6f 72 20 |t excell|ent for |
|00006230| 72 65 66 65 72 65 6e 63 | 65 2e 20 49 74 20 69 73 |referenc|e. It is|
|00006240| 20 61 20 0d 0a 63 6f 6c | 6c 65 63 74 69 6f 6e 20 | a ..col|lection |
|00006250| 6f 66 20 72 65 70 72 69 | 6e 74 73 20 6f 66 20 6d |of repri|nts of m|
|00006260| 6f 73 74 20 6f 66 20 74 | 68 65 20 6d 61 6a 6f 72 |ost of t|he major|
|00006270| 20 70 61 70 65 72 73 20 | 69 6e 20 74 68 65 20 66 | papers |in the f|
|00006280| 69 65 6c 64 2e 22 3b 20 | 0d 0a 0d 0a 41 6e 64 65 |ield."; |....Ande|
|00006290| 72 73 6f 6e 2c 20 4a 2e | 20 41 2e 2c 20 50 65 6c |rson, J.| A., Pel|
|000062a0| 6c 69 6f 6e 69 73 7a 2c | 20 41 2e 20 61 6e 64 20 |lionisz,| A. and |
|000062b0| 52 6f 73 65 6e 66 65 6c | 64 2c 20 45 2e 20 28 45 |Rosenfel|d, E. (E|
|000062c0| 64 73 29 2e 20 28 31 39 | 39 30 29 2e 0d 0a 4e 65 |ds). (19|90)...Ne|
|000062d0| 75 72 6f 63 6f 6d 70 75 | 74 69 6e 67 20 32 3a 20 |urocompu|ting 2: |
|000062e0| 44 69 72 65 63 74 69 6f | 6e 73 20 66 6f 72 20 52 |Directio|ns for R|
|000062f0| 65 73 65 61 72 63 68 2e | 20 54 68 65 20 4d 49 54 |esearch.| The MIT|
|00006300| 20 50 72 65 73 73 3a 20 | 43 61 6d 62 72 69 64 67 | Press: |Cambridg|
|00006310| 65 2c 20 4d 41 2e 0d 0a | 43 6f 6d 6d 65 6e 74 73 |e, MA...|Comments|
|00006320| 3a 20 22 54 68 65 20 73 | 65 71 75 65 6c 20 74 6f |: "The s|equel to|
|00006330| 20 74 68 65 69 72 20 77 | 65 6c 6c 2d 6b 6e 6f 77 | their w|ell-know|
|00006340| 6e 20 4e 65 75 72 6f 63 | 6f 6d 70 75 74 69 6e 67 |n Neuroc|omputing|
|00006350| 20 62 6f 6f 6b 2e 22 0d | 0a 0d 0a 43 61 75 64 69 | book.".|...Caudi|
|00006360| 6c 6c 2c 20 4d 2e 20 61 | 6e 64 20 42 75 74 6c 65 |ll, M. a|nd Butle|
|00006370| 72 2c 20 43 2e 20 28 31 | 39 39 30 29 2e 20 4e 61 |r, C. (1|990). Na|
|00006380| 74 75 72 61 6c 6c 79 20 | 49 6e 74 65 6c 6c 69 67 |turally |Intellig|
|00006390| 65 6e 74 20 53 79 73 74 | 65 6d 73 2e 0d 0a 4d 49 |ent Syst|ems...MI|
|000063a0| 54 20 50 72 65 73 73 3a | 20 43 61 6d 62 72 69 64 |T Press:| Cambrid|
|000063b0| 67 65 2c 20 4d 61 73 73 | 61 63 68 75 73 65 74 74 |ge, Mass|achusett|
|000063c0| 73 2e 20 28 49 53 42 4e | 20 30 2d 32 36 32 2d 30 |s. (ISBN| 0-262-0|
|000063d0| 33 31 35 36 2d 36 29 2e | 0d 0a 43 6f 6d 6d 65 6e |3156-6).|..Commen|
|000063e0| 74 73 3a 20 22 49 20 67 | 75 65 73 73 20 6f 6e 65 |ts: "I g|uess one|
|000063f0| 20 6f 66 20 74 68 65 20 | 62 65 73 74 20 62 6f 6f | of the |best boo|
+--------+-------------------------+-------------------------+--------+--------+
Only 25.0 KB of data is shown above.
